En självkörande bil kör på en ensam motorväg. Plötsligt dök en enorm tromb upp i fjärran. Vad kommer förarlösa bilar att göra härnäst?
Detta är bara ett av scenarierna som Waymo kan simulera i den ”hyperrealistiska” virtuella värld som den just skapat med hjälp av Googles DeepMind. Waymos världsmodell är byggd med Genie 3, Googles nya AI-världsmodell som kan generera virtuella interaktiva utrymmen som inkluderar text och bilder som uppmaningar. Men Genie 3 är inte bara till för att göra skitiga avslutningar av Nintendo-spel. Du kan också bygga fotorealistiska, interaktiva 3D-miljöer som är ”anpassade till påfrestningarna i körvärlden”, säger Waymo.
Simulering är ett nyckelelement i utvecklingen av autonoma fordon, vilket gör det möjligt för utvecklare att testa fordon i en mängd olika miljöer och scenarier, av vilka många endast inträffar i mycket sällsynta fall och inte utgör någon fysisk risk för skada på passagerare eller fotgängare. AV-företag kommer att använda dessa virtuella miljöer för att köra en serie tester, som samlar på sig miljoner eller till och med miljarder mil under processen, i hopp om att bättre träna sina fordon för alla ”kantfall” de kan stöta på i den verkliga världen.
Vilka kantfall testar Waymo? Förutom den tidigare nämnda tromben kan företaget också simulera saker som en snötäckt Golden Gate-bron, en översvämmad förorts återvändsgränd med flytande möbler, ett grannskap i lågor och till och med ett möte med en vildsindig elefant. I varje scenario genererar Waymo robotaxis LIDAR-sensorer en 3D-rendering av den omgivande miljön, inklusive hinder på vägen.
”Waymo World Model kan generera praktiskt taget vilken scen som helst, från vardagskörning till sällsynta long-tail-scenarier, över flera sensormodaliteter”, sa företaget i ett blogginlägg.
Waymo säger att Genie 3 är idealisk för att skapa virtuella världar med robotaxel, med hänvisning till tre unika mekanismer: drivande actionkontroll, scenlayoutkontroll och språkkontroll. Köråtgärdskontroller tillåter utvecklare att simulera ”tänk om” kontrafakta, och scenlayoutkontroller tillåter utvecklare att anpassa väglayouter som trafikljus och andra trafikanters beteende. Waymo beskriver språkkontroll som ”det mest flexibla verktyget” som låter dig justera tid på dygnet och väderförhållanden. Detta är särskilt användbart när utvecklare försöker simulera situationer med svagt ljus eller hög bländning, där det kan vara svårt för fordonets olika sensorer att se vägen framför sig.
Waymo World Model kan också ta bilder från verkliga fordonskameror och omvandla dem till en simulerad miljö, vilket ger ”den högsta graden av realism och fakta” i virtuella tester, säger företaget. Du kan också skapa längre simuleringsscener, inklusive scener som spelas upp i 4x hastighet, utan att offra bildkvalitet eller datorbehandling.
”Genom att simulera det ”omöjliga”, förbereder vi proaktivt Waymo-förare för några av de mest sällsynta och komplexa scenarierna”, sa företaget i ett blogginlägg.
