Meta baru saja menjatuhkan SAM 3D, tetapi yang lebih menarik, mereka pada dasarnya memecahkan kemacetan data 3D yang telah menahan lapangan selama bertahun-tahun. Membuat atau memindai kebenaran dasar 3D secara manual untuk dunia nyata yang berantakan pada dasarnya tidak mungkin dalam skala besar. Tetapi bagaimana jika Anda hanya memiliki output model peringkat manusia? Rutekan casing tepi yang aneh ke seniman 3D yang sebenarnya untuk dimodelkan, putar kembali. Tiba-tiba Anda dapat membuat anotasi seperti sejuta gambar. Ini pada dasarnya RLHF untuk rekonstruksi 3D. Data sintetis adalah prapelatihan, peringkat dunia nyata adalah penyelarasan. Mereka meminjam seluruh buku pedoman sialan dan itu benar-benar berhasil. Dua model - satu untuk objek/adegan, satu untuk manusia. Mereka sudah mengirimkannya di FB Marketplace sehingga Anda dapat melihat apakah lampu atau kursi itu terlihat bagus di kamar Anda sebelum membeli. Juga mereka merilis segalanya - model, kode, rig tubuh manusia mereka di bawah lisensi komersial. Dan mereka membangun serangkaian gambar dunia nyata yang berantakan untuk membantu menjembatani kesenjangan sim-ke-nyata. Masalah mesin data adalah yang paling menarik. 3D telah terhambat oleh kebenaran dasar selamanya. Jika verifikasi lebih mudah daripada pembuatan, tiba-tiba seluruh permainan berubah.