Es tut mir leid, aber das 1M-Kontextfenster klingt nur auf dem Papier gut. In der Realität ist es eher wie ein 400-500k Kontextfenster. Das beworbene 1M ist die größte Lüge, die ich je gesehen habe. Das Modell bricht lange bevor dieser Punkt erreicht ist zusammen – es vergisst nicht, aber es beginnt, völlig zu versagen.
33,19K