Problema cu SWE-bench: De ce cursa noastră LLM este construită pe nisip 1) În lumea LLM-urilor, reperele sunt tabloul de bord. Companiile prezintă cifrele investitorilor, utilizatorilor și publicului ca și cum ar reprezenta "inteligență". Dar cel mai mediatizat punct de referință verificat de SWE se dovedește a fi profund defectuos. Să despachetăm de ce 👇
520