Woran Sie sehen, was die KI wirklich gemacht hat

Drei kostenlose Skills geben einer KI je eine Regel für jede Antwort mit. Regel eins verlangt für jede Zahl die Quelle. Regel zwei prüft ein Dokument gegen die Vorlage statt gegen das Gedächtnis. Regel drei verlangt einen Bericht darüber, was wirklich bearbeitet wurde. Unter jeder Antwort steht am Ende ein fester Block. Statt jedes Mal alles von Hand zu prüfen, lesen Sie diesen Block.

1. Vier Situationen, die Sie kennen

Montag, nach zwei Stunden Besprechung. Sie werfen das Transkript in die KI und bitten um eine Zusammenfassung. Was zurückkommt, liest sich sauber. Sie schicken es in die Runde. Am Mittwoch fragt eine Kollegin nach den beiden Punkten, an denen die ganze Sitzung hing. Die stehen nicht drin. Im Transkript standen sie sehr wohl und in der Zusammenfassung fehlt jeder Hinweis auf diese Lücke.

Dienstag. Fünf Dateien und ein klarer Auftrag. Nach einer Weile kommt die Meldung: alles erledigt. Sie glauben es zunächst und später sehen Sie doch nach. Bearbeitet ist eine Datei. Die anderen vier sind unberührt. Der Satz alles erledigt sah aus wie an jedem anderen Tag auch.

Mittwochabend, eine lange Ideensitzung. Vieles davon ist gut. Am Ende bitten Sie um die Zusammenstellung und die Hälfte der Einfälle dieses Abends fehlt darin. Sie scrollen die ganze Sitzung zurück und sammeln die Punkte von Hand ein. Für diese Sucherei haben Sie die KI nicht geholt.

Donnerstag, Zahlen für die Geschäftsführung. Die KI schreibt von zwölf Prozent Wachstum gegenüber dem Vorquartal. Der Absatz geht so raus. Zwei Wochen später fragt jemand nach der Herkunft dieser zwölf Prozent. In Ihrer Datei stehen sie nirgends.

2. Was in allen vier Fällen gleich ist

Jedes Mal bekommen Sie ein sauber formuliertes Ergebnis und kein einziges Mal bekommen Sie die Arbeit dahinter zu sehen. Die Antwort nennt keine Datei, keine Liste und keine Herkunft. Ihnen bleibt damit nur das Nachsehen von Hand. Genau diese Arbeit sollte Ihnen die KI abnehmen. Der Ärger sitzt also nicht beim Fehler selbst und auch nicht bei der Technik dahinter, sondern bei der fehlenden Möglichkeit zum Erkennen.

Dazu kommt das Schlimmste daran. Eine falsche Antwort und eine gedeckte Antwort sehen gleich aus. Beide haben ganze Sätze und beide klingen gleich sicher. Am Wortlaut ist kein Unterschied zu erkennen. Deshalb fällt die Lücke Tage später vor anderen Leuten auf.

3. Drei Regeln, die die Arbeit sichtbar machen

Genau hier setzen drei kostenlose Skills an. Jeder gibt der KI eine einzige Regel mit und jeder verlangt am Ende ein Stück Ausgabe zum Ansehen.

Der erste Skill heißt source-required. Jede Zahl und jede Sachaussage bekommt eine Marke: gemessen mit benannter Quelle, Urteil mit benannter Grundlage, oder ungeprüft. Die zwölf Prozent ohne Datei stünden dort als ungeprüft.

Abbildung 1: Eine Zahl ohne benannte Herkunft ist eine Vorhersage, keine Auskunft.

Bild maschinell erzeugt

Abbildung 2: Der Weg von der Aussage zum Belegblock.

Abbildung 1 hält die Lage dazu fest. Abbildung 2 zeigt die vier Schritte dieser Regel und die drei möglichen Marken.

Der zweite Skill heißt nothing-missed und dreht die Reihenfolge der Arbeit um. Zuerst zieht die KI die Punkte aus der Vorlage und schreibt sie als Liste heraus. Dann schreibt sie den Text gegen diese Liste. Am Ende steht der Abgleich Punkt für Punkt daneben. Die beiden Punkte aus der Besprechung wären darin aufgefallen.

Abbildung 3: Sauber angerichtet und trotzdem fehlt fast alles.

Bild maschinell erzeugt

Abbildung 4: Die Liste entsteht vor dem Text, der Abgleich steht am Ende daneben.

Abbildung 3 zeigt eine sauber angerichtete Abgabe ohne Inhalt. In Abbildung 4 stehen beide Reihenfolgen untereinander, dazu der Abgleich mit zwei fehlenden Punkten.

Der dritte Skill heißt show-your-work. In jeder Werkstatt bekommen Sie bei der Abholung ein Blatt über die gemachte Arbeit. Diese Regel verlangt dasselbe Blatt von der KI. Jede angefasste Datei steht darin. Jeder Schritt steht darin. Eine bearbeitete Datei von fünf wäre sofort sichtbar gewesen.

Abbildung 5: Der Daumen ist keine Auskunft über die geleistete Arbeit.

Bild maschinell erzeugt

Abbildung 6: Die Meldung und der Bericht über jede einzelne Datei nebeneinander.

Abbildung 5 zeigt die Geste dazu. Abbildung 6 stellt die kurze Meldung neben den Bericht über jede einzelne der fünf Dateien.

Ein Skill ist eine Regel im Kontext der KI. Damit ist er eine Bitte und keine Schranke. Anhalten kann er eine Antwort nicht. Was er leistet, ist eine Sache: die Arbeit kommt zusammen mit dem Ergebnis. Ob der Bericht stimmt, prüfen weiterhin Sie. Keine der drei Seiten behauptet eine gemessene Wirkung.

4. Was am Montagmorgen zu tun ist

Nehmen Sie sich die Sorte Antwort vor, die Sie am häufigsten weiterreichen. Stellen Sie zum letzten Text dieser Sorte drei Fragen. Stand hinter jeder Zahl eine Quelle? Waren alle Ihre Punkte enthalten? Könnten Sie die wirklich angefassten Dateien benennen? Jedes Nein zeigt auf eine der drei Regeln.