Lukk annonse

Apple har lansert en åpen kildekode-modell av SHARP som kan generere en fotorealistisk 3D-scene fra et enkelt 2D-bilde – på under et sekund. Dette avanserte verktøyet er et resultat av omfattende opplæring ieuronye nettverk på både syntetiske og reelle data, samtidig som skala og dybde opprettholdes for å samsvare med virkeligheten.

3D-skue fra ett enkelt bilde

I motsetning til vanlige metoder for såkalt Gaussisk splatting, som krever titalls til hundrevis av bilder av en enkelt scene fra forskjellige vinkler, Apple skapte en revolusjonerende løsning som er i stand til å forutsi en komplett 3D-scene fra bare ett bilde. SHARP-modellen i én omgang neuroDet nye nettverket estimerer dybden i motivet og lager millioner av 3D Gaussiske punkter – små «uskarpe» prikker av farge og lys – som sammen skaper et overbevisende romlig bilde.

Denne 3D-representasjonen kan sees interaktivt fra ulike nærbilder, noe som skaper inntrykk av en ekte romlig scene. SHARPs nøyaktighet og hastighet støttes ytterligere av sammenligninger med tidligere modeller: for eksempel oppnår SHARP med Gen3C-metoden opptil 34 % lavere LPIPS-verdier (visuell similarity metric) og 43 % bedre DISTS-resultater.

Det er imidlertid en begrensning her – modellen er ikke designet for å rekonstruere usynlige deler av scenen, så den må holde seg nær det opprinnelige synspunktet. Dette holder den imidlertid rask og stabil, noe som gjør den til et ideelt verktøy for rask visualisering og romlig rekonstruksjon.

Alle kan lage sitt eget 3D-bilde

Apple i tillegg ga SHARP den ut som åpen kildekode på GitHub, slik at enhver utvikler eller entusiast kan prøve det ut. Brukere på X-nettverket (Twitter) har allerede begynt å dele sine egne tester og resultater, inkludert animasjoner og korte videoer som viser modellens funksjoner og potensial for fremtidig utvidelse.

SHARP representerer dermed det neste steget Appinn i verdenen av generativ kunstig intelligens og 3D-visualiseringer, og viser at selskapet har noe å tilby utover maskinvarefeltet. Hvis du er interessert i teknologien, er det definitivt verdt å teste SHARP og se selv.

Dagens mest leste

.