AI fail Mai 2025

Topaktueller AI Code-Editor der neuesten Generation. Das Marketing-Versprechen: Versteht auch massive Codebases agenticmäßig vollumfänglich. Programmieren 10x schneller usw. Mach Tab-Tab-Tab und fertig.

Aufgabe: Es ging um ein einfaches Search & Replace von MySQL-Tabellennamen in einer älteren PHP-Codebase.

Ergebnis: Es ist immer noch das Gleiche wie vor einem Jahr. Die KI „halluziniert einem ins Gesicht“ wenn sie etwas nicht schafft, und annstatt zu sagen: Sorry, kann ich nicht, macht sie Irgendetwas …und macht damit Probleme, die man davor nicht hatte.

Die Probleme von heute im Einzelnen:

Die KI hat „Angst“ vor Nicht-UTF8-Dateien (ANSI Western-Codierung): Verweigerte wegen Encoding-Problemen das Schreiben von Dateien. Immerhin. Vorschlag der KI das Problem zu lösen? Es wäre straightforward, das manuell mit einem anderen Editor zu lösen, an ca. 1500 Fundstellen. Das hab ich dann auch gemacht und hat mit Checks ca. 4 Stunden Zeit gebraucht …nur hatte ich mir das mit KI-Hilfe so vogestellt: Ca. 30 Minuten einen ordentlichen Prompt schreiben, dann die KI 5 Minuten machen lassen, den Zeitvorteil bezahlen und fertig.

Zweites Problem: Der Tabellenname lagerort sollte ersetzt werden. Die KI meinte aber, dass der Tabellenname lager genau so gut ist. Auf den Fehler merhfach aufmerksam gemacht, hat sie den Task in Vogelstrauß-Manier kurzerhand unter den Tisch fallen lassen. Problem gelöst auf KI-Art.

Fazit: KI ist immer noch kein verlässlicher Coding-Partner, wenn es um das Refactoring einer bestehenden Codebase geht. Im Gegenteil. Würde man sich auf sie verlassen, hätte man sich ein Vielfaches an Arbeit aufgehalst, nur um zu überprüfen, ob auch alles richtig gemacht worden ist.