Breaking News

World Labs AI dapat menghasilkan adegan 3D interaktif dari satu foto

World Labs AI dapat menghasilkan adegan 3D interaktif dari satu foto

Laboratorium duniastartup yang didirikan oleh pionir AI Fei-Fei Li, telah melakukannya tdk dpt tidur proyek pertamanya: sistem kecerdasan buatan yang dapat menghasilkan adegan 3D mirip video game dari satu gambar.

Banyak dari AI sistem Anda dapat mengonversi foto menjadi model dan lingkungan 3D. Namun adegan World Labs unik karena bersifat interaktif dan dapat dimodifikasi.

“[Our tech] memungkinkan Anda memasukkan gambar apa pun dan menjelajahinya dalam 3D”, World Labs menulis dalam postingan blog. “Di luar gambar masukan, semuanya dihasilkan.”

Sistem World Labs mengubah gambar menjadi pemandangan 3D yang interaktif dan dapat dijelajahi. Kredit gambar:Laboratorium dunia

Adegan yang dihasilkan AI, yang dapat dijelajahi oleh siapa pun yang memiliki keyboard dan mouse dalam demo di situs web World Labs, terlihat mengesankan, meski sedikit kartun. Mereka ditampilkan langsung di browser dan memiliki kamera yang dapat dikontrol dengan simulasi kedalaman bidang (DoF) yang dapat disesuaikan. Semakin kuat efek DoF, objek latar belakang akan tampak semakin buram.

Sistem World Labs adalah bagian dari kategori AI yang sedang berkembang yang disebut “model dunia.” Banyak dari ini model Itu dapat mensimulasikan permainan dan lingkungan 3D, tetapi dengan artefak dan masalah koherensi. Misalnya model simulasi dunia Minecraft dari startup Decart, OasisIni memiliki resolusi rendah dan dengan cepat “melupakan” tata letak level.

Sebaliknya, pendekatan World Labs memastikan bahwa pemandangan tetap sama setelah dihasilkan dan mematuhi hukum dasar fisika, yang berarti pemandangan tersebut memiliki kesan soliditas dan kedalaman.

Sistem World Labs juga dapat menerapkan efek interaktif dan animasi pada pemandangan, seperti mengubah warna objek dan menerangi latar belakang secara dinamis.

Laboratorium dunia
Adegan yang dihasilkan oleh sistem World Labs. Kredit gambar:Laboratorium dunia

“Sebagian besar alat AI generatif membuat konten 2D seperti gambar atau video,” tulis World Labs. “Sebaliknya, menghasilkan konten 3D meningkatkan kontrol dan konsistensi. “Ini akan mengubah cara kita membuat film, game, simulator, dan manifestasi digital lainnya dari dunia fisik kita.”

Sekarang, tentu ada ruang untuk perbaikan. Adegan World Labs tidak sepenuhnya dapat dieksplorasi: pergerakan Anda terbatas pada area kecil. (Cobalah untuk keluar darinya dan Anda akan mencapai batasnya.) Dan terkadang terjadi kesalahan rendering, misalnya objek menyatu secara tidak wajar.

Tapi World Labs mengatakan itu hanya “pratinjau”.

“Kami bekerja keras untuk meningkatkan ukuran dan fidelitas dunia yang kami hasilkan dan bereksperimen dengan cara-cara baru bagi pengguna untuk berinteraksi dengan mereka,” tulis startup tersebut di blog.

Laboratorium dunia
Bagian dari demo di situs World Labs. Efek dapat diterapkan ke pemandangan secara real time. Kredit gambar:Laboratorium dunia

World Labs, yang diluncurkan awal tahun ini, telah melakukannya meningkatkan Modal ventura senilai $230 juta dari investor termasuk Andreessen Horowitz (a16z), Ashton Kutcher, Intel Capital, AMD Ventures, dan Eric Schmidt. Dengan nilai lebih dari $1 miliar, perusahaan berharap produk pertamanya siap pada tahun 2025.

Selain adegan interaktif, World Labs berencana untuk menciptakan alat yang berguna bagi para profesional seperti seniman, desainer, pengembang, pembuat film, dan insinyur. Ini ditujukan untuk klien mulai dari pengembang video game hingga studio film.

“Kami sudah memiliki kemampuan untuk menciptakan dunia virtual dan interaktif, namun hal ini membutuhkan biaya ratusan juta dolar dan banyak waktu pengembangan,” kata salah satu pendiri World Labs, Justin Johnson, dalam sebuah pernyataan baru-baru ini. episode dari podcast a16z. “[World models] Ini akan memungkinkan Anda tidak hanya mendapatkan gambar atau klip, tetapi juga dunia 3D yang sepenuhnya disimulasikan, dinamis, dan interaktif.”

Sumber