Dan Luu
Ein Ingenieur und Autor, der dafür bekannt ist, häufig wiederholte Behauptungen über Software sorgfältig zu überprüfen und sie oft für falsch zu halten.
Dan Luu schreibt einen langjährigen Blog, der etwas Seltenes tut: Er nimmt Behauptungen, die jeder wiederholt, und misst sie tatsächlich. Sein Hintergrund liegt in der Hardwareverifizierung und Leistungsarbeit, und das zeigt sich in der Methode. Er äußert seine Vermutungen, bevor er sich die Ergebnisse anschaut, veröffentlicht die Mängel seiner eigenen Tests und weigert sich, Schlussfolgerungen zu ziehen, die über die Daten hinausgehen.
Im Jahr 2026 wendete er diesen Ansatz auf Behauptungen zur KI-Codierung an, einschließlich des weit verbreiteten Hinweises, dass kompakte dynamische Sprachen für Codierungsagenten günstiger seien. Bei der Ausführung größerer, realistischerer Aufgaben verschwand der Effekt weitgehend, und bei einem der von den Leuten zitierten Benchmarks stellte sich heraus, dass er einen fehlerhaften Testaufbau aufwies, der eine ganze Sprache schlecht aussehen ließ. Sein Schreiben ist ein nützliches Gegenmittel, wenn KI-Benchmark-Charts in Umlauf kommen.