Wenn KI-Ergebnisse nicht stimmen: Fehler erkennen und richtig reagieren
Du fragst Dein KI-System nach den Kündigungsfristen im Arbeitsrecht. Die Antwort klingt kompetent, die Paragraphen werden zitiert, alles wirkt plausibel. Du schickst die Zusammenfassung an Deinen Kunden. Am nächsten Tag meldet sich Dein Anwalt: Zwei der drei genannten Fristen existieren nicht. Die KI hat sie erfunden. Überzeugend, detailliert und vollständig falsch.
Vier Arten von KI-Fehlern
Nicht jeder Fehler hat dieselbe Ursache. Wenn Du verstehst, warum ein Ergebnis falsch ist, weißt Du auch, wie Du es beim nächsten Mal verhindern kannst.
Missverständnis: Du fragst nach einer Zusammenfassung, das System liefert eine Analyse. Du wolltest drei Stichpunkte, es schreibt drei Absätze. Die Antwort ist nicht falsch, sie passt nur nicht zu dem was Du gemeint hast. In acht von zehn Fällen liegt das Problem nicht beim System, sondern in der Art wie Du gefragt hast. Prüfe zuerst Deine Formulierung, bevor Du das System für fehlerhaft hältst.
Erfundene Information: Das System erfindet Fakten, Zitate, Paragraphen oder Quellen. Es tut das nicht absichtlich. Es erzeugt Text der plausibel klingt, ohne zu prüfen ob der Inhalt stimmt. Je selbstsicherer die Antwort klingt, desto vorsichtiger solltest Du sein. Frage nach: "Woher stammt diese Information?" Wenn das System keine nachprüfbare Quelle nennen kann, behandle die Aussage als ungesichert.
Verlorener Zusammenhang: Du führst ein längeres Gespräch mit dem System. Am Anfang hast Du erklärt, dass es um einen bestimmten Kunden geht. Nach zehn Nachrichten hat das System diesen Zusammenhang vergessen und antwortet allgemein statt spezifisch. KI-Systeme haben ein begrenztes Gedächtnis. Je länger das Gespräch, desto mehr geht am Anfang verloren. Wiederhole die wichtigsten Eckdaten in regelmäßigen Abständen, statt darauf zu vertrauen, dass das System sich erinnert.
Falsches Format: Der Inhalt stimmt, aber die Form ist falsch. Du wolltest eine Tabelle, Du bekommst Fließtext. Du wolltest eine E-Mail, Du bekommst einen Bericht. Die Lösung ist die einfachste aller vier: Beschreibe das gewünschte Format ausdrücklich. "Antworte in Form einer Tabelle mit drei Spalten: Datum, Aufgabe, Verantwortlicher." Je genauer die Formatangabe, desto besser das Ergebnis.
Drei Gewohnheiten die Fehler verhindern
Erst die eigene Anfrage prüfen. Bevor Du das System für einen Fehler verantwortlich machst, lies Deine Anfrage nochmal. War sie eindeutig? Könnte ein Mensch sie auch anders verstehen? Wenn ja, ist es kein Systemfehler sondern ein Formulierungsproblem.
Bei Fakten immer eine zweite Quelle heranziehen. Keine KI-Antwort die Fakten enthält, sollte ohne Gegenprüfung an Kunden oder Geschäftspartner gehen. Nicht weil das System unzuverlässig ist, sondern weil es den Unterschied zwischen plausibel und wahr nicht kennt.
Überraschende Ergebnisse als Warnsignal behandeln. Wenn eine KI-Antwort Dich überrascht - positiv oder negativ - ist das ein Grund genauer hinzuschauen. Besonders bei Zahlen, Daten und Rechtsaussagen. Was überraschend klingt, ist oft überraschend falsch.
Für alle, die wirklich mehr wissen und umsetzen möchten ...
Zur KI-Gemeinschaft »Was Du bei einem Fehler konkret tust
Du bemerkst einen Fehler. Was jetzt? Erstens: Korrigiere das Ergebnis für den aktuellen Fall. Zweitens: Verstehe warum der Fehler passiert ist. Drittens: Passe Deine Arbeitsweise an, damit derselbe Fehler nicht mehr vorkommt.
Wenn das System eine Formulierung regelmäßig falsch versteht, ändere die Formulierung in Deiner Vorlage. Wenn es bei einem bestimmten Thema häufig falsche Informationen liefert, füge eine Prüfroutine für dieses Thema ein. Wenn es den Zusammenhang verliert, teile lange Gespräche in kürzere auf.
Der wichtigste Punkt: Fehler sind kein Zeichen dafür, dass das System schlecht ist. Sie sind Hinweise darauf, wo Du Deine Zusammenarbeit mit dem System verbessern kannst. Jeder Fehler, den Du verstehst, macht Dich im Umgang mit KI kompetenter.