KI–frustriert und genervt?

Du bist (auch) KI–frustriert und genervt?

Es kann auch am gewählten Modell liegen.

Ein Beispiel für einen Prompt mit Code und die (naive) Idee, geeignete Dokumentation (automatisch) zu erhalten. Ein mehrstufiger Test wurde mit lokal installierten LLMs durchgeführt (darunter gemma3, phi4, dolphincoder und viele mehr).

Ein und dieselbe Eingabe liefert (stark) unterschiedliche Ergebnisse. Dies gilt nicht nur für Unterschiede im Inhalt, sondern sogar für völlig unterschiedliche Rückgaben in Bibliotheken (hier Python Openai). Die Benutzeroberfläche liefert völlig unterschiedliche Ergebnissätze. Automatisierte, KI-unterstützte Dokumentation ist ein eigenständiges Projekt.

Hier sind Beispiele, die je nach Modell von sehr gut bis absurd reichen. GEMMA3 und PHI4 lieferten gute Ergebnisse.

Mehrstufiger Test mit lokalen LLMs

Kopfbild:
Erstellt mit ChatGPT

Werkstattbericht