Revolucija u AI tehnologiji: Iz jedne fotografije stvara interaktivne 3D svjetove koje možete istraživati

World Labs, startup koji je osnovala AI pionirka Fei-Fei Li, predstavio je svoj prvi projekt: AI sustav koji može generirati 3D scene nalik videoigrama iz samo jedne fotografije.

Mnogi AI sustavi mogu pretvoriti fotografiju u 3D modele i okruženja. No scene World Labsa jedinstvene su po tome što su interaktivne – i mogu se modificirati.

“[Naša tehnologija] vam omogućuje da uđete u bilo koju sliku i istražite je u 3D-u,” napisao je World Labs u blog postu. “Osim ulazne slike, sve ostalo je generirano.”

AI-generirane scene, koje svatko s tipkovnicom i mišem može istražiti u demonstraciji na web stranici World Labsa, izgledaju impresivno, iako pomalo crtano. Renderiraju se uživo u pregledniku i imaju kontrolabilnu kameru s podesivom simuliranom dubinskom oštrinom (DoF). Što je DoF efekt jači, pozadinski objekti izgledaju zamućenije.

World Labsov sustav dio je nove kategorije AI-ja zvane “world models” (modeli svijeta). Mnogi od ovih modela mogu simulirati igre i 3D okruženja – ali s artefaktima i problemima konzistentnosti. Na primjer, Oasis, Minecraft-simulirajući svjetski model startupa Decart, ima nisku rezoluciju i brzo “zaboravlja” raspored razina.

Nasuprot tome, pristup World Labsa osigurava da scene ostaju iste nakon što su generirane i da poštuju osnovne zakone fizike, što znači da imaju osjećaj čvrstoće i dubine.

World Labsov sustav također može primijeniti interaktivne efekte i animacije na scene, poput mijenjanja boje objekata i dinamičkog osvjetljenja pozadina.

“Većina generativnih AI alata stvara 2D sadržaj poput slika ili videa,” napisao je World Labs. “Generiranje u 3D-u umjesto toga poboljšava kontrolu i konzistentnost. Ovo će promijeniti način na koji stvaramo filmove, igre, simulatore i druge digitalne manifestacije našeg fizičkog svijeta.”

Naravno, ima prostora za poboljšanje. Scene World Labsa nisu potpuno istražive – vaša kretanja ograničena su na malo područje. (Pokušate li se pomaknuti izvan njega, udarit ćete u granicu.) I povremeno se pojavljuju greške u renderiranju – na primjer, objekti koji se spajaju na neprirodan način.

No World Labs kaže da je ovo samo “rani pregled”.

“Naporno radimo na poboljšanju veličine i vjernosti naših generiranih svjetova te eksperimentiramo s novim načinima na koje korisnici mogu s njima komunicirati,” napisao je startup u blogu.

World Labs, koji je pokrenut početkom ove godine, prikupio je 230 milijuna dolara rizičnog kapitala od investitora, uključujući Andreessen Horowitz (a16z), Ashtona Kutchera, Intel Capital, AMD Ventures i Erica Schmidta. Tvrtka, vrijedna preko milijardu dolara, nada se da će njihov prvi proizvod biti spreman 2025. godine.

Osim interaktivnih scena, World Labs planira izgraditi alate koji bi mogli biti korisni profesionalcima poput umjetnika, dizajnera, developera, filmskih stvaratelja i inženjera. Ciljaju na klijente od developera videoigara do filmskih studija.

“Već imamo sposobnost stvaranja virtualnih, interaktivnih svjetova, ali to košta stotine i stotine milijuna dolara i ogromno vrijeme razvoja,” rekao je suosnivač World Labsa Justin Johnson u nedavnoj epizodi a16z podcasta. “[Modeli svijeta] će vam omogućiti da ne dobijete samo sliku ili isječak, već potpuno simuliran, živopisan i interaktivan 3D svijet.”