Meta har precis släppt SAM 3D, men mer intressant är att de i princip knäckte flaskhalsen i 3D-data som hållit fältet tillbaka i åratal. Att manuellt skapa eller skanna 3D-grundsanningen för den röriga verkliga världen är i princip omöjligt i stor skala. Men vad händer om du bara har människor ranka modellresultat? Skicka de konstiga undantagsfallen till riktiga 3D-artister för modellering, och koppla in det igen. Plötsligt kan du annotera typ en miljon bilder. Det är i princip RLHF för 3D-rekonstruktion. Syntetisk data är förträning, verklig världsranking är alignment. De lånade hela förbannade handboken och den fungerar faktiskt. Två modeller – en för objekt/scener, en för människor. De skickar redan den via FB Marketplace så du kan se om lampan eller stolen passar i ditt rum innan du köper. De släpper också allt – modeller, kod, deras människokroppsrigg under kommersiell licens. Och de byggde en utvärderingsuppsättning av verkligt röriga bilder från verkligheten för att hjälpa till att överbrygga kløften mellan simulering och verklighet. Datamotorn är dock den mest intressanta. 3D har varit flaskhalsad av verklighetssanningen för alltid. Om verifiering skalar lättare än skapandet förändras plötsligt hela spelet.