Eine Automatisierung ist kein Möbelstück: Sie ist ein Organismus, angeschlossen an Systeme, die sich ohne Vorwarnung bewegen. Ein Anbieter ändert das Format einer Antwort. Ein Modell wird aktualisiert und wird vorsichtiger, also weniger klar. Ein Vertriebsmitarbeiter ändert eine Rabattregel, und niemand denkt daran, es zu sagen. Drei Monate später funktioniert der Prozess noch, aber schlechter, und niemand weiß, seit wann.
Die fünf Fragen, eine nach der anderen
- Wer greift ein, wenn sich eine Schnittstelle ändert? Eine namentlich benannte Person, eine zugesagte Reaktionszeit und ein Weg, sie zu erreichen.
- Wer überwacht, und was? Nützliche Überwachung prüft nicht nur, ob der Dienst antwortet: Sie prüft, ob das Ergebnis noch gut ist.
- Wer korrigiert Fehler, und in welcher Frist? Ein blockierender Vorfall und ein langsames Abdriften werden nicht gleich behandelt.
- Was passiert, wenn das Modell sein Verhalten ändert? Es braucht eine festgesetzte Version, einen Satz Referenzbeispiele und einen Vergleich vor dem Wechsel.
- Was kostet das alles im Jahr? Eine vor der Unterschrift genannte Zahl, kein Angebot, das beim ersten Vorfall auftaucht.
Das Ergebnis überwachen, nicht nur den Dienst
Klassische Überwachung beantwortet die Frage «läuft es». Das genügt nicht: Eine Automatisierung kann einwandfrei laufen und dabei immer schlechtere Ergebnisse liefern. Wir überwachen deshalb auch den Inhalt: den Anteil der von Menschen korrigierten Vorschläge, den Anteil der als unsicher markierten Fälle, die durchschnittlichen Kosten je Ausführung und die Durchlaufzeiten.
Wenn eine dieser Kennzahlen abdriftet, gibt es ein Signal vor dem Vorfall. Genau das ist der Unterschied, ob man eine Automatisierung korrigiert oder sie durch einen unzufriedenen Kunden als defekt entdeckt.
Eine Automatisierung fällt fast nie auf einen Schlag aus. Sie verfällt, und Stille wird für Stabilität gehalten.
Der Modellwechsel
Das ist das für KI-Projekte typische Risiko, und es ist wenig bekannt. Ein aktualisiertes Modell ist nicht dasselbe Produkt: Der Stil ändert sich, die Vorsicht ändert sich, das Ausgabeformat kann sich ändern. Drei Vorkehrungen genügen: einen Prozess nie auf eine unbestimmte Version zeigen lassen, einen Satz Beispiele mit den erwarteten Antworten aufbewahren und diesen Satz vor jedem Wechsel erneut durchspielen. Hat der Anbieter diese Referenzbeispiele nicht, kann er nicht wissen, was eine Aktualisierung bei Ihnen verändert hat.
Wieder übernehmen
Das ist der Punkt, der das Unternehmen langfristig schützt. Er hängt an vier Bedingungen: Code und Anweisungen liegen bei Ihnen, die Konten der genutzten Dienste gehören Ihnen, es gibt eine Dokumentation, die auch andere lesen können, und der Vertrag sieht eine Übergabe vor. Ein Anbieter, der diese vier Bedingungen akzeptiert, fürchtet nicht, ersetzt zu werden, was in der Regel ein gutes Zeichen für alles Übrige ist.
Wir vertiefen das in dem Artikel über Eigentum, und unser Steuerungsangebot auf der Seite KI-Orchestrator beschreibt genau, wer nach der Lieferung was macht.
Unsere Haltung
Wir verkaufen keine Lieferung mit anschließendem Schweigen. Überwachung, Korrektur und Anpassung gehören zur Leistung, mit genanntem Preis, weil das die einzige ehrliche Art ist, eine Automatisierung darzustellen: Sie ist kein Kauf, sie ist ein Betrieb.


