Den Copilot-Pilot dokumentieren. Aufgabe, Ergebnis und Nacharbeit.
Ein Pilot liefert Belege oder Geschichten. Wie du Eingabe, Ergebnis und Nacharbeit je Durchlauf festhältst und Beobachtung von Erwartung trennst.
„Und, wie läuft der Pilot?“
„Gut, die Leute sind zufrieden.“
Mit dieser Antwort entscheidest du gar nichts. Nicht für den Ausbau, nicht dagegen und schon gar nicht übers Budget.
Ein Pilot ist erst dann einer, wenn jemand aufschreibt, was passiert ist. Die Aufgaben dafür hast du im Auswahlworkshop gefunden, den Rahmen setzt Teil 3 der Readiness-Serie. Jetzt geht es um die Liste, in der die Wahrheit steht.
Eingabe, Ergebnis, Nacharbeit
Die meisten Pilotnotizen werfen drei Dinge in einen Topf. Halt sie getrennt, dann kannst du später sagen, woran ein Ergebnis lag.
- Die Eingabe. Der Auftrag an Copilot im Wortlaut und die Quellen, die dabei ausgewählt waren. Ohne die Eingabe kannst du ein Ergebnis weder wiederholen noch verbessern.
- Das Ergebnis. Was Copilot geliefert hat, unverändert abgelegt. Nicht die polierte Version, die am Ende rausging.
- Die Nacharbeit. Was die Fachperson ergänzt, korrigiert, gestrichen oder umformuliert hat, bis das Ergebnis brauchbar war.
In der Nacharbeit steckt die eigentliche Information. Ein Entwurf, der in zwei Minuten entsteht und zwanzig Minuten Korrektur braucht, sieht in jeder Nutzungsstatistik genauso aus wie einer, der fast fertig ist.
Die Zeit ist die verführerischste Zahl
Jeder will wissen, wie viel Zeit Copilot spart. Die Frage ist berechtigt. Allein führt sie in die Irre.
Erstens zählt die ganze Bearbeitungszeit. Auftrag formulieren, Ergebnis lesen, korrigieren, prüfen. Zweitens ist ein Vergleich mit „früher“ nur etwas wert, wenn „früher“ aufgeschrieben wurde. Gibt es keinen Ausgangswert, schreib genau das in die Auswertung und behaupte keine Ersparnis.
Deshalb erfasst du je Durchlauf vier Dinge. Bearbeitungszeit, Nacharbeit, Vollständigkeit und fachliche Richtigkeit. Die Richtigkeit hat Vorrang. Ein schneller, vollständiger Protokollentwurf mit einem falschen Termin ist kein gutes Ergebnis.
Der Eintrag je Durchlauf
Eine SharePoint-Liste mit einem Eintrag pro Durchlauf reicht völlig. Diese Felder würde ich anlegen.
| Feld | Was hinein gehört |
|---|---|
| Datum und Pilotperson | |
| Pilotaufgabe | Auswahl aus den vereinbarten Aufgaben |
| Quellen | Die tatsächlich ausgewählten Dokumente |
| Eingabe | Der Auftrag im Wortlaut |
| Ergebnis | Link auf die unveränderte Ablage |
| Bearbeitungszeit gesamt | Minuten |
| Ausgangswert vorhanden | Ja oder nein |
| Nacharbeit | Minuten und Art |
| Fehlte etwas aus den Quellen | Ja oder nein, mit Stichwort |
| Stand etwas Falsches drin | Ja oder nein, mit Stichwort und Schwere |
| Fachliche Prüfung | Name der Fachperson |
| Nächstes Mal anders | Ein Satz zum Auftrag |
Das letzte Feld ist das unscheinbarste und bringt am meisten. Dort lernt die Gruppe, wie gute Aufträge aussehen.
Die Prüffragen der Fachperson legst du vor dem ersten Durchlauf fest, nicht danach. Beim Protokollentwurf etwa so. Sind alle Beschlüsse drin? Stimmen Namen und Termine? Steht etwas im Entwurf, das niemand gesagt hat? Beim Statusbericht fragst du, ob sich jede Aussage einem Quelldokument zuordnen lässt und ob ein Risiko aus der Liste fehlt. Bei einem Antwortentwurf an Kunden, ob Preise, Fristen und Zusagen zu den Textbausteinen passen.
B oder E
In jeder Pilotauswertung stehen Sätze wie „Copilot erfasst Beschlüsse zuverlässig“. Die Frage dazu ist immer dieselbe. Hat das jemand beobachtet, oder erwartet es jemand?
Ich kennzeichne in der Auswertung jede Aussage mit B oder E.
B für Beobachtung. „In vier von fünf Durchläufen fehlte kein Beschluss.“ Das steht so in der Liste, und es darf in die Entscheidungsvorlage.
E für Erwartung. Ein Eindruck, eine Annahme, ein Versprechen aus dem Marketing. Wertlos ist das nicht. Es sind die Fragen für die nächste Pilotrunde.
Und noch etwas gehört in die Auswertung. Die Durchläufe, die schlecht liefen. Wer nur die guten zeigt, erzählt eine Geschichte.
Was die Nutzungsberichte beitragen
Die Nutzungsberichte im Admin Center und das Copilot Dashboard zeigen, wer Copilot wie oft und in welcher App nutzt. Für den Pilot sind sie eine gute Gegenkontrolle. Zeigt deine Liste zehn Durchläufe und der Bericht keine Nutzung, stimmt etwas nicht.
Über die Qualität sagen sie nichts. Hohe Nutzung kann heißen, dass eine Aufgabe gut läuft. Oder dass jemand fünf Anläufe für ein brauchbares Ergebnis braucht.
Worauf du achten solltest
- Nur die Pilotaufgaben dokumentieren. Wer jeden Copilot-Aufruf erfassen will, beendet den Pilot durch Bürokratie.
- Mehrere Durchläufe je Aufgabe. Copilot liefert auf denselben Auftrag nicht jedes Mal dasselbe. Ich empfehle mindestens fünf, damit ein Ausreißer nicht das Bild bestimmt.
- Keine Prozentwerte aus fünf Durchläufen. Das sind Hinweise, keine Statistik.
- Die Liste ist vertraulich. Eingaben und Ergebnisse enthalten echte Inhalte. Die Liste braucht passende Berechtigungen und eine Entscheidung, wie lange die Einträge bleiben.
- Prüfer und Pilotperson trennen, wo es geht. In kleinen Gruppen ist es oft dieselbe Person. Dann steht das im Eintrag.
Am Ende steht je Aufgabe ein Vorschlag. Fortführen, anpassen oder beenden. Mit den Einträgen als Begründung.
Wie viele deiner Pilotaussagen würden heute ein B bekommen?
Gruß Micha