Meta właśnie wprowadziło SAM 3D, ale co bardziej interesujące, w zasadzie przełamali wąskie gardło danych 3D, które przez lata hamowało rozwój tej dziedziny. Ręczne tworzenie lub skanowanie 3D rzeczywistej prawdy dla chaotycznego świata rzeczywistego jest praktycznie niemożliwe na dużą skalę. Ale co jeśli po prostu poprosisz ludzi o ocenę wyników modeli? Przekieruj dziwne przypadki do prawdziwych artystów 3D, aby je modelowali, a następnie włącz to z powrotem. Nagle możesz oznaczyć jak milion obrazów. To w zasadzie RLHF dla rekonstrukcji 3D. Dane syntetyczne to wstępne szkolenie, a ocena w rzeczywistym świecie to dostosowanie. Pożyczyli cały ten podręcznik i to naprawdę działa. Dwa modele - jeden dla obiektów/scen, drugi dla ludzi. Już wysyłają to na FB Marketplace, więc możesz zobaczyć, czy ta lampa lub krzesło dobrze wygląda w twoim pokoju przed zakupem. Również wydają wszystko - modele, kod, ich rig ciała ludzkiego na licencji komercyjnej. A także stworzyli zestaw ewaluacyjny rzeczywistych chaotycznych obrazów, aby pomóc w zniwelowaniu różnicy między symulacją a rzeczywistością. Jednak to silnik danych jest najbardziej interesujący. 3D było blokowane przez prawdę gruntową od zawsze. Jeśli weryfikacja jest łatwiejsza do skalowania niż tworzenie, nagle cała gra się zmienia.