De huidige SotA AI-modellen bieden een productiviteitsboost van 20% voor algemene kenniswerkers. Tegen 2030 zou de gemiddelde werknemer, met AI, 12x productiever kunnen zijn. Ik denk nog steeds dat mensen het tempo van vooruitgang onderschatten.

De AI-systemen van vandaag zijn nog steeds foutgevoelig voor algemene taken (van het soort dat een advocaat, investeringsbankier of consultant zou doen). Door de tijd voor foutcorrectie te accommoderen, verhogen ze de productiviteit van werknemers, maar nauwelijks (en zijn ze gevoelig voor initiële voorwaarden).

De Apex-benchmark biedt het kader waarmee we kunnen beoordelen hoe performant AI-modellen zijn, en geeft een idee van hoe ze verbeteren in dit soort algemene taken. Vandaag de dag scoren de beste modellen net iets meer dan 60% op de benchmark. Tegen 2030 zou de state of the art 95%+ moeten bereiken.

Het AI-model dat vandaag de dag nauwelijks de moeite waard is om te gebruiken, wordt het model dat je ontslaat als je het over twee jaar niet gebruikt.