Wie prüft man eine KI im Büro laufend? Fragen aus der Geschäftsleitung
Kurz gesagt: Eine KI im Büro braucht keine aufwendige Kontrollabteilung, aber ein paar feste Gewohnheiten. Dazu gehören eine wöchentliche Stichprobe, eine einfache Fehlerliste, eine benannte verantwortliche Person und eine Regel, wann das System abgeschaltet oder zurückgestuft wird. So bemerken Sie schleichende Verschlechterungen, bevor Kunden sie bemerken. Die folgenden Fragen stellen Inhaber am häufigsten, wenn die erste Begeisterung vorbei und der Alltag eingekehrt ist.
Wie viel soll ich überhaupt prüfen?
Genug, um Muster zu erkennen, nicht genug, um die Zeitersparnis aufzufressen. Als Ausgangspunkt dient eine feste Stichprobe pro Woche, etwa zehn zufällig gezogene Vorgänge je Anwendung. Zufällig bedeutet wirklich zufällig: Wer sich nur die auffälligen anschaut, übersieht die stillen Fehler. Bei neuen Anwendungen prüfen Sie in den ersten Wochen mehr, bei bewährten weniger. Entscheiden Sie die Menge nicht nach Bauchgefühl, sondern nach den Folgen eines Fehlers: Ein Entwurf für interne Notizen braucht weniger Aufmerksamkeit als eine Rechnungsausgabe.
Woran erkenne ich, dass die Qualität sinkt?
Qualität sinkt selten plötzlich, sondern in kleinen Schritten. Typische Auslöser sind Änderungen, die Sie selbst gar nicht bemerken: Der Anbieter aktualisiert das Modell, ein Lieferant ändert sein Rechnungslayout, ein neuer Kollege schreibt Mails anders. Darum lohnt es sich, ein paar feste Testfälle aufzubewahren, die Sie regelmässig durchlaufen lassen, zum Beispiel zehn typische Belege oder Anfragen mit bekannter richtiger Antwort. Weicht das Ergebnis von früher ab, wissen Sie, dass sich etwas verändert hat.
Auch weiche Signale zählen: Mitarbeitende, die ein Ergebnis "kurz noch korrigieren", ohne es zu melden, oder Kundschaft, die auffällig oft nachfragt.
Wie sieht eine brauchbare Fehlerliste aus?
Eine Tabelle genügt, mit diesen Spalten:
- Datum und Anwendung
- Was war falsch? (ein Satz)
- Wer hat es bemerkt, und wo?
- Was war die Folge? (keine, intern, Kundschaft betroffen)
- Was wurde geändert?
Wichtig ist die Folge. Nach einem Monat sortieren Sie nach Fehlerart und stellen fest, ob ein Lieferant, eine Belegart oder eine Mailkategorie gehäuft vorkommt. Meist reichen dann kleine Regeln statt grosser Umbauten. Schuldzuweisung gehört nicht in die Liste: Sobald Mitarbeitende fürchten, dass Einträge gegen sie verwendet werden, hören sie auf, Fehler zu melden, und Sie verlieren Ihr bestes Frühwarnsystem.
Wer soll das verantworten?
Eine Person, mit einem Namen. In kleinen Betrieben ist das oft die Büroleitung, manchmal die Inhaberin selbst. Sie führt die Fehlerliste, zieht die Stichprobe oder verteilt sie, hält Kontakt zum Anbieter und entscheidet bei Zweifeln über Rückstufung. Eine Vertretung braucht es auch. Gemeinsame Verantwortung aller heisst in der Praxis oft Verantwortung von niemandem.
Wann sollen wir die KI abschalten?
Legen Sie die Regel vorher fest, nicht im Krisenfall. Beispiele, die Sie anpassen können:
- Zwei Fehler mit Kundenfolgen innerhalb eines Monats: Anwendung geht zurück auf "nur vorschlagen".
- Ein Fehler mit finanziellem Schaden: Anwendung pausiert, bis die Ursache geklärt ist.
- Der Anbieter ändert Bedingungen oder Datenverarbeitung: Prüfung vor Weiterbetrieb.
Wichtig ist auch, dass der Betrieb ohne KI weiterlaufen kann. Halten Sie die alte Arbeitsweise in einer kurzen Anleitung fest, damit nach einer Pause niemand ratlos vor dem Postfach sitzt.
Wie gehe ich mit Datenschutz im Dauerbetrieb um?
Das Thema endet nicht bei der Einführung. Prüfen Sie jährlich, ob sich Anbieter, Serverstandorte oder Unterauftragnehmer geändert haben, und löschen Sie Daten, die nicht mehr gebraucht werden. Wer Personendaten verarbeitet, sollte ausserdem im Blick behalten, wer im Betrieb Zugriff hat. In der Schweiz informiert der Eidgenössische Datenschutz- und Öffentlichkeitsbeauftragte über das Datenschutzgesetz. Diese Hinweise ersetzen keine Rechtsberatung, sie helfen aber, die richtigen Fragen zu stellen.
Wie erkläre ich das dem Team?
Offen und mit klarem Ziel: Die Kontrolle richtet sich gegen Fehler des Systems, nicht gegen Menschen. Zeigen Sie in der Teamsitzung ein Beispiel aus der Fehlerliste, besprechen Sie, was daraus folgt, und lassen Sie Verbesserungsvorschläge sammeln. Wer erlebt, dass Meldungen zu spürbaren Verbesserungen führen, meldet weiter. Wer erlebt, dass nichts passiert, hört auf.
Was kostet das an Zeit?
Eine verbindliche Zahl können wir nicht nennen, sie hängt von Anzahl und Art der Anwendungen ab. Als Planungsgrösse kann eine Stunde pro Woche für die Stichprobe und eine halbe Stunde für die Fehlerliste ein Anfang sein. Wenn die Kontrolle mehr Zeit frisst, als die Automatik spart, ist das ein Hinweis, dass die Anwendung noch nicht reif ist oder zu viel verlangt.
Was gehört in die Dokumentation für den Ernstfall?
Eine einzige Seite genügt: Welche Anwendungen laufen, was dürfen sie selbstständig tun, wer ist verantwortlich, wo liegen die Zugangsdaten, und wen ruft man beim Anbieter an. Ergänzen Sie, wie die Arbeit ohne System weiterläuft und welche Daten wo gespeichert werden. Diese Seite hilft bei Vertretung, bei Prüfungen durch Treuhänder oder Versicherungen und bei einem Wechsel des Anbieters. Aktualisieren Sie sie bei jeder Änderung, spätestens im Jahresgespräch, und lassen Sie sie von einer zweiten Person gegenlesen, denn der Verfasser sieht seine eigenen Lücken am schlechtesten.
Illustratives Beispiel
Ein Treuhandbüro mit fünf Mitarbeitenden liest Belege per KI aus. In der Stichprobe fällt auf, dass bei einem bestimmten Lieferanten die Mehrwertsteuer regelmässig falsch erkannt wird. Der Eintrag steht in der Fehlerliste, die Büroleitung ergänzt eine Sonderregel für diesen Lieferanten, und die Fehler verschwinden. Ohne Liste wäre das Muster aufgefallen, als es in der Quartalsabrechnung nicht mehr stimmte.
Häufige Fragen
Reicht es, wenn der Anbieter die Qualität sichert?
Nein. Der Anbieter prüft sein Produkt allgemein, nicht Ihre Belege, Mails und Kunden. Die Kontrolle in Ihrem Betrieb bleibt nötig.
Müssen wir Fehler dem Anbieter melden?
Es lohnt sich, vor allem bei wiederkehrenden Mustern. Der Anbieter kann oft Einstellungen ändern oder erklären, warum etwas passiert.
Was, wenn das Team die Prüfung nicht macht?
Dann ist sie zu aufwendig oder zu unklar. Vereinfachen Sie die Vorlage, verkürzen Sie die Stichprobe und planen Sie die Zeit fest im Kalender ein.
Wenn Sie KI im Büro mit einer schlanken Qualitätskontrolle betreiben möchten, schreiben Sie uns über das Anfrageformular.