Le fotocamere a 360 gradi hanno nuovi superpoteri

Immagina Google Street View, tranne che puoi camminare come se fosse un videogioco. Ora immagina di non dover aspettare che Google filmi perché è completamente fai-da-te. Insta360, il principale produttore di fotocamere a 360 gradi, sta ora collaborando con una startup britannica di 12 persone chiamata Splatica per aiutare i creatori a fare proprio questo.

Lo scorso gennaio abbiamo scritto dello splatting gaussiano, la tecnologia che promette un giorno di consentire alle persone di ricreare digitalmente parti del mondo reale in 3D ottico. Ma Splastica sta rendendo sorprendentemente facile lo sfruttamento delle barriere Oggi – non è altro che una fotocamera consumer a 360 gradi standardizzata e un servizio in abbonamento che gestisce tutto il resto.

Quando dico “sorprendentemente facile”, intendo sul serio: ecco tutto quello che dovevo fare:

L’ho testato con entrambe le fotocamere Insta360 X5 e Anti Gravity A1 e puoi vedere i miei risultati qui sotto. Sebbene non siano certamente perfette (le icone possono spesso sembrare un po’ eteree, come se stessi entrando in un dipinto in CG), sono arrivato a credere che alcuni creatori e aziende compreranno fotocamere a 360 gradi solo per questo scopo. Il co-fondatore di Insta360 Max Richter mi ha detto che le fotocamere dell’azienda sono già richieste per tour virtuali immobiliari, rapporti sullo stato di avanzamento della costruzione e ispezioni di strutture: se fossi un agente immobiliare, ne comprerei una per questa funzionalità proprio adesso.

Ecco il mio scatto AntiGravity A1 della gigantesca struttura di gioco nel mio parco locale (usa i tasti WASD sulla tastiera per volare e il mouse per sterzare, oppure trascina i controlli sullo schermo del telefono):

E il canestro da basket è rotto in un altro parco in fondo alla strada. Splastica ha eliminato automaticamente la maggior parte delle persone presenti nella scena, quindi il parco era un po’ più vuoto di quanto non fosse in realtà.

Se tocchi il pulsante del percorso nell’angolo in alto a destra, sotto “SD” e “HD”, vedrai il percorso esatto che ho seguito con ciascuna fotocamera (e il selfie stick di Insta360 X5) per produrre questi risultati.

Quando ho fatto il giro del cerchio solo una volta, come puoi vedere qui sotto, non sembrava altrettanto bello. Splastica può riprodurre solo ciò che vede la tua fotocamera, quindi devi filmare da qualsiasi luogo in cui potresti voler “stare” nel mondo virtuale.

Di seguito, ho provato a simulare un’ispezione di base del ponte nello stesso parco, concentrandomi su un pilastro sotto i binari dei pendolari BART. Non sono sicuro che abbia abbastanza dettagli per soddisfare veri geometri o ispettori della sicurezza: forse è stata l’eccessiva entusiasmo per evitare gli ostacoli da parte del drone che ha causato l’interruzione del mio volo.

Ma quando ho trascorso più di cinque minuti a catturare il mio giardino con l’X5, i risultati erano così estesi che io e mia moglie non ci sentivamo a nostro agio nel condividere l’intera scansione. Invece, diamo un’occhiata a come Splastica ha ricreato tutti gli oggetti nel mio cortile creando una nuvola di punti 3D:

Tutte queste scansioni possono essere scaricate nei formati PLY e USDZ e sono collegate a misurazioni del mondo reale: Andrey Shelomentsev, co-fondatore di Splastica, mi ha detto che di solito c’è un errore dell’1% ogni 100 cm, “abbastanza buono per il rilevamento preliminare e l’esplorazione dello spazio”, e ha detto che le misurazioni potrebbero essere più accurate posizionando diversi indicatori attorno a un’area.

In realtà non è la prima volta che provo a scansionare in 3D il mio giardino: nel 2021 l’ho fatto con il drone autovolante Skydio. Ma prima, Skydio addebitava $ 2.999 all’anno per questa funzionalità, che non includeva il drone o il servizio di unione delle foto, mentre Splastica afferma che il suo servizio fa tutto automaticamente con i normali video a 360 gradi.

Le scene campione di Splastica sono ancora più interessanti delle mie, soprattutto ora che stanno cercando di dimostrare che le aziende possono utilizzare i loro servizi per addestrare i robot prima di distribuirli nelle fabbriche di tutto il mondo. Ecco lo stabilimento Imecar Elektronik ad Antalya, Türkiye:

E per qualcosa di completamente diverso, ecco uno sguardo a Leighton House a Londra:

Come è possibile farlo semplicemente andando in giro con una macchina fotografica? Shelomentsev mi ha detto che la sua azienda ha creato una versione proprietaria di SLAM (la tecnica di localizzazione e mappatura simultanea che consente a tutti i tipi di robot, auto a guida autonoma e visori VR di conoscere la propria posizione nello spazio 3D) appositamente progettata per creare nuvole di punti precise da video a 360 gradi. Puoi pensare alle nuvole di punti come agli “scheletri” di oggetti 3D che vengono poi colorati.

E mentre Splastica afferma che può funzionare con qualsiasi fotocamera a 360 gradi, aiuta il fatto che le stesse fotocamere Insta360 e AntiGravity iniettino tutti i tipi di metadati extra nei file video. “I file contengono tutto ciò di cui abbiamo bisogno: parametri di distorsione dell’obiettivo, velocità dell’otturatore, dati dell’accelerometro e del giroscopio e GPS, trasmessi direttamente dall’app mobile Insta360 alla fotocamera durante le riprese”, ha affermato Eugene Nikolskii, CEO e co-fondatore di Splatica. Il limite.

_{Sopra: Corridor Crew spiega visivamente come funzionano gli slider.}

La combinazione Insta360/Splatica presenta delle limitazioni. Se ingrandisci uno qualsiasi dei miei esempi incorporati o collegati per vedere i dettagli più fini, probabilmente vedrai macchie di colore leggermente sfocate invece di trame leggibili: dopo tutto è così che sono realizzate le icone. La fotogrammetria tradizionale ad alta risoluzione può funzionare meglio se la superficie è ciò che ti interessa di più.

Ma ciò non ha impedito a Insta360, AntiGravity e Splatica di lanciare una campagna di marketing chiamata Project Eternal, che le aziende stanno proponendo come “iniziativa globale” per preservare i punti di riferimento culturali per le generazioni future. Assegna premi per le migliori icone gaussiane, 1.000 caricamenti Spplastica gratuiti (primo arrivato, primo servito) e un progetto pilota per scansionare le splendide Pompei e Civita di Bagnoregio in Italia. Hanno anche “invitato i creatori di tutto il mondo” a scansionare siti come i teatri romani e l’isola di Jeju in Corea del Sud.

(Le aziende non ci dicono quanto stanno investendo in Project Eternal e ammettono che non aiutano i creatori a ottenere le licenze per quelle località, ma Splatica afferma che manterrà l’accesso pubblico a tempo indeterminato a qualsiasi filmato inviato al suo “Open Legacy Dataset” e che la società ha adottato una politica sulla privacy che chiarisce che i tuoi contenuti appartengono a te.)

Inoltre, Richter di Insta360 ha affermato che la sua azienda ha già clienti aziendali che testano processi di ricostruzione 3D e gemelli digitali nei settori dell’edilizia e della gestione delle strutture e spera di fornire dati più ricchi dalle telecamere ai servizi di ricostruzione 3D e rendere il processo più fluido.

Attualmente, il più grande ostacolo all’ingresso in Splastica potrebbe essere il fatto che il servizio non è economico. L’azienda addebita tra 18 centesimi e 25 centesimi al secondo per i video elaborati e paghi anche una quota di abbonamento mensile. L’azienda sta attualmente testando i prezzi: la settimana scorsa era di $ 70, $ 200 o $ 385 al mese a seconda della quantità di scansioni necessaria, mentre questa settimana le stesse tariffe sono $ 50, $ 150 e $ 300.

Ma se vuoi provarlo, puoi comunque ottenere uno dei 1.000 slot gratuiti. Splastica afferma che offrirà la registrazione gratuita ai primi 1.000 utenti, ognuno dei quali potrà trasformare circa 10 minuti di filmati a 360 gradi in un piccolo mondo 3D. Puoi anche esplorare oltre 100 icone aggiuntive nella galleria pubblica di Splastica.