Key Takeaway
- Nvidia baru-baru ini menunjukkan teknik yang menukar foto 2D menjadi pemandangan 3D dalam beberapa saat sahaja.
- Kaedah menggunakan kuasa komputer untuk menganggarkan cara cahaya berkelakuan di dunia nyata.
- Metaverse ialah satu kawasan yang adegan 3D membantu kerana ia boleh dilihat dari mana-mana perspektif kamera.
Teknologi kecerdasan buatan (AI) baharu daripada Nvidia tidak lama lagi boleh menukar foto 2D menjadi pemandangan 3D dalam beberapa saat sahaja, menjadikan penciptaan ruang maya yang mengasyikkan seperti metaverse sebagai remeh seperti pemprosesan perkataan.
Nvidia baru-baru ini menunjukkan kaedah foto yang dipanggil NeRF Segera, yang menggunakan kuasa pengkomputeran untuk menganggarkan cara cahaya bertindak di dunia nyata. Ia boleh mengubah foto lama anda menjadi adegan permainan video, atau ia boleh digunakan untuk melatih robot dan kereta pandu sendiri untuk memahami saiz dan bentuk objek dunia sebenar.
"Pengimejan 3D membawa dunia transformasi baharu, " Oren Debbi, Ketua Pegawai Eksekutif Visionary.ai, sebuah syarikat penglihatan komputer yang menjalankan algoritma 3Dnya pada platform Nvidia, memberitahu Lifewire dalam temu bual e-mel. "Menggunakan 3D, anda meniru kedalaman dunia sebenar ke dalam pemandangan dan menjadikan imej kelihatan lebih hidup dan realistik. Selain AR/VR dan kamera industri, di mana 3D adalah perkara biasa, kami kini melihat ia digunakan pada hampir setiap telefon pintar tanpa pengguna pun tahu."
Menambah Dimensi
Foto segera pertama, diambil 75 tahun yang lalu dengan kamera Polaroid, bertujuan untuk menangkap dunia 3D dalam imej 2D dengan pantas. Kini, penyelidik AI sedang mengusahakan sebaliknya: menukar koleksi imej pegun menjadi pemandangan 3D digital dalam beberapa saat.
Dikenali sebagai pemaparan songsang, proses ini menggunakan AI untuk menganggarkan cara cahaya berkelakuan di dunia nyata, membolehkan penyelidik membina semula pemandangan 3D daripada segelintir imej 2D yang diambil pada sudut berbeza. Nvidia mendakwa ia telah membangunkan pendekatan yang menyelesaikan tugas ini hampir serta-merta.
Nvidia menggunakan pendekatan ini dengan teknologi baharu yang dipanggil medan sinaran saraf, atau NeRF. Syarikat itu berkata hasilnya, digelar Instant NeRF, adalah teknik NeRF terpantas setakat ini. Model ini hanya memerlukan beberapa saat untuk melatih beberapa dozen foto pegun dan kemudiannya boleh memaparkan pemandangan 3D yang terhasil dalam berpuluh-puluh milisaat.
"Jika perwakilan 3D tradisional seperti jerat poligon adalah serupa dengan imej vektor, NeRF adalah seperti imej bitmap: ia menangkap padat cara cahaya memancar daripada objek atau dalam pemandangan, " David Luebke, naib presiden untuk penyelidikan grafik di Nvidia, berkata dalam satu siaran berita. "Dalam erti kata itu, NeRF Segera mungkin sama pentingnya dengan 3D seperti kamera digital dan pemampatan JPEG kepada fotografi 2D-meningkatkan kelajuan, kemudahan dan capaian penangkapan dan perkongsian 3D dengan ketara.”
Mengumpul data untuk menyuapkan NeRF memerlukan rangkaian saraf untuk menangkap beberapa dozen imej yang diambil dari berbilang kedudukan di sekeliling tempat kejadian, serta kedudukan kamera setiap tangkapan tersebut.
NeRF melatih rangkaian saraf kecil untuk membina semula pemandangan dengan meramalkan warna cahaya yang terpancar ke mana-mana arah, dari mana-mana titik dalam ruang 3D.
Rayuan 3D
Metaverse ialah satu kawasan di mana adegan 3D berguna kerana ia boleh dilihat dari mana-mana perspektif kamera, Brad Quinton, pengasas Platform Perceptus untuk realiti tambahan (AR), memberitahu Lifewire dalam temu bual e-mel. Sama seperti kita boleh berjalan melalui bilik dalam kehidupan sebenar dan melihat kandungannya dari pelbagai sudut yang berbeza, dengan pemandangan 3D yang dibina semula, kita boleh bergerak melalui ruang dan melihatnya dari sebarang perspektif.
"Ini amat berguna untuk mencipta persekitaran untuk digunakan dalam realiti maya," kata Quinton.
Program seperti Apple's Object Capture menggunakan teknik yang dipanggil fotogrametri untuk mencipta objek 3D maya daripada satu siri imej 2D. Model 3D akan digunakan secara meluas dalam realiti maya dan aplikasi AR, Quinton meramalkan. Contohnya, sesetengah AI, seperti yang terdapat dalam Platform AR Perceptus, menggunakan model 3D untuk mencipta pemahaman tentang dunia sebenar, yang membolehkan aplikasi AR masa nyata.
Penggunaan imej 3D juga meniru kedalaman dunia sebenar dalam adegan dan menjadikan imej kelihatan lebih hidup dan realistik, kata Debbi. Untuk mencipta kesan Bokeh (aka mod potret atau mod sinematik), pemetaan kedalaman 3D diperlukan. Teknik ini digunakan pada hampir setiap telefon pintar.
"Ini sudah menjadi standard untuk juruvideo profesional yang merakam filem, dan ini menjadi standard untuk setiap pengguna," tambah Debbi.
