360-graderskameror har nya superkrafter

Föreställ dig Google Street View. Skillnaden är att du kan gå runt som i ett tv-spel. Tänk dig att inte behöva vänta på att Google släpper en film eftersom det är helt DIY. Insta360, en ledande tillverkare av 360-graderskamera, har slagit sig ihop med en brittisk startup med 12 personer som heter Splatica för att hjälpa kreatörer att göra just det.

I januari förra året skrev vi om Gaussisk stänk. Denna teknik lovar att en dag tillåta vem som helst att digitalt återskapa delar av den verkliga världen i fotorealistisk 3D. Men Splatica gör det nu otroligt enkelt att använda Splat, med bara en 360-graderskamera för konsumenter och en prenumerationstjänst som tar hand om allt annat.

När jag säger ”fantastiskt lätt”, menar jag det. Det var allt jag behövde göra.

Jag provade det med både Insta360 X5-kameran och Antigravity A1. Du kan kontrollera resultaten nedan. De är inte på något sätt perfekta, men markeringar ser ofta lite fantastiska ut, som att kliva in i en CG-målning, men jag är redan övertygad om att vissa kreatörer och företag kommer att köpa 360-graderskameror bara för detta ändamål. Insta360 medgrundare Max Richter sa att företagets kameror redan efterfrågades för virtuella fastighetsturer, konstruktionsförloppsrapporter och inspektioner av anläggningar. Om jag var en fastighetsmäklare skulle jag köpa den nu för den här funktionen.

Detta är en Antigravity A1-fångst av den gigantiska lekplatsutrustningen i min lokala park (använd WASD-tangenterna på ditt tangentbord för att flyga, använd musen eller dra kontrollerna på telefonens skärm för att manövrera).

Och det fanns en misshandlad basketkorg i en annan park på vägen. Splatica redigerar och tar automatiskt bort de flesta personer i scenen, så parken ser lite mer tom ut än den faktiskt är.

Om du trycker på sökvägsknappen i det övre högra hörnet under ”SD” och ”HD”, bör du se den exakta slingrande vägen varje kamera (och Insta360 X5:s selfie-stick) tog för att skapa dessa resultat.

Som du kan se nedan ser bara ett varv runt bågen inte lika bra ut. Splatica kan bara återge det som kameran fångar, så du måste fotografera från alla möjliga platser du kan ”stå” i den virtuella världen.

Nedan simulerade vi en grundläggande broinspektion i samma park, med fokus på en enda kolumn under BART pendeltåget. Jag vet inte om den innehåller tillräckligt med detaljer för att tillfredsställa en verklig besiktningsman eller säkerhetsinspektör. Kanske berodde det på att mitt flyg höll på att pausas på grund av drönarens överdrivna undvikande av hinder.

Men när jag ägnade mer än fem minuter åt att fånga min bakgård med X5 var resultaten så omfattande att min fru och jag inte kände oss särskilt bekväma med att dela hela skanningen. Kolla istället in hur Splatica återskapade alla objekt på din bakgård genom att generera ett 3D-punktmoln.

Alla dessa skanningar kan laddas ner i PLY- och USDZ-format och korreleras med verkliga mätningar. Splaticas medgrundare Andrey Shelomentsev sa att ett typiskt fel på 1% för varje 100 centimeter är ”tillräckligt för kartläggning och grov utforskning av rymden”, och att noggrannheten i mätningarna kan ökas genom att placera flera markörer runt området.

Det här är faktiskt inte första gången jag har provat att 3D-skanna min bakgård. 2021 gjorde vi det med Skydios självflygande drönare. Men vid den tiden debiterade Skydio $2 999 per år för den här funktionen, som inte inkluderade drönaren eller fotohäftningstjänsten, medan Splatica hävdade att dess tjänst skulle göra allt självständigt med vanlig 360-graders video.

Splaticas egen provscen är till och med mer intressant än min, särskilt nu när företag försöker bevisa att de kan använda dess tjänster för att träna robotar innan de faktiskt distribueras i fabriker runt om i världen. Detta är Imecar Elektroniks fabrik i Antalya, Turkiye.

För något helt annat, här är en titt på Leighton House i London.

Hur är detta möjligt bara genom att gå runt med en kamera? Shelomensev sa att hans företag har byggt en egenutvecklad version av SLAM (en samtidig lokaliserings- och kartläggningsteknik som gör det möjligt för alla typer av robotar, självkörande bilar och VR-headset att veta sin plats i 3D-rymden) speciellt utformad för att skapa exakta punktmoln från 360-graders videor. Du kan tänka på ett punktmoln som ”benen” av ett 3D-objekt som är målade med färg.

Och medan Splatica säger att det kan fungera med vilken 360-graderskamera som helst, hjälper Insta360- och Antigravity-kameror att infoga alla typer av ytterligare metadata i själva videofilen. ”Filen innehåller allt du behöver: linsförvrängningsparametrar, slutarhastighet, accelerometer- och gyroskopdata och GPS, och strömmas direkt från Insta360-mobilappen till kameran under inspelningen”, säger Eugene Nikolskii, VD och medgrundare av Splatica, till The Verge.

Ovan: The Corridor Crew förklarar visuellt hur splats fungerar.

Insta360/Splatica-kombon har begränsningar. Om du zoomar in på mitt inbäddade eller länkade prov för att se detaljerna kommer du förmodligen att se något genomskinliga färgklumpar snarare än en läsbar textur. Det är trots allt så splats görs. Om ytor är ditt primära problem kan traditionell högupplöst fotogrammetri fungera bättre.

Men det har inte hindrat Insta360, Antigravity och Splatica från att lansera en marknadsföringskampanj som heter Project Eternal, som företagen framhåller som en ”global ansträngning” för att bevara kulturella landmärken för framtida generationer. Den bästa Gauss Splat kommer att få ett pris, 1 000 gratis Splatica-uppladdningar (först till kvarn) och ett pilotprojekt för att skanna Pompeji och Italiens fantastiska Civita di Bagnoregio. Det är också ”bjuder in kreatörer från hela världen” att skanna platser som den romerska teatern och Sydkoreas ön Jeju.

(Företagen avböjde att säga hur mycket de investerar i Project Eternal, och erkände att de inte hjälper kreatörer att säkra tillstånd för dessa platser. Splatica hävdar dock att de har allmän tillgång till alla scener som skickats till Open Heritage Dataset på obestämd tid, och företaget har en väletablerad integritetspolicy som gör det klart att innehållet tillhör dess användare.)

Dessutom säger Richter från Insta360 att hans företag redan har företagskunder som piloterar 3D-rekonstruktion och digitala dubbelarbetsflöden i bygg- och anläggningshanteringsutrymmet, och vill tillhandahålla rikare data från kameror till 3D-rekonstruktionstjänster för att göra processen mer sömlös.

Just nu kan det största hindret för inträde för Splatica vara att tjänsten inte är billig. Företaget tar mellan 18 cent och 25 cent per sekund för bearbetad video, och du måste också betala en månadsavgift. Företaget experimenterar för närvarande med prissättning. Förra veckan var det $70, $200 eller $385 per månad beroende på storleken på skanningen du behöver, och den här veckan är det $50, $150 eller $300 på samma nivå.

Men om du vill ge det ett försök kanske du kan få en av de 1 000 gratis slotsen. Splatica har meddelat att de kommer att avstå från prenumerationsavgifter för de första 1 000 användarna, och varje användare bör kunna förvandla 10 minuter av 360-gradersfilm till en miniatyr 3D-värld. Du kan också utforska över 100 extra slots i Splaticas offentliga galleri.