Ein Testanruf fragt nach einem Tisch am Freitag um 16 Uhr.
Beispiel · KI-Anwendung
Der eingesetzte Chatbot oder KI-Agent gibt falsche oder unpassende Antworten.
Im Detail
Der Telefonassistent bestätigt eine Reservierung außerhalb der Öffnungszeit.
Der Agent bestätigt, obwohl das Brauhaus freitags erst um 17 Uhr öffnet.
Zusätzlich sagt der Agent verbindlich zu, obwohl die Rezeption die Reservierung erst bestätigen soll.
Lösungsvorschlag
Telefonassistent · PrüfungsfallBeim Vielanker-Telefonassistenten legte ein Testanruf zwei getrennte Fehler offen.
Der Agent bestätigte einen Tisch für Freitag um 16 Uhr. Die Prüfung zeigte zwei Ursachen: eine falsche Öffnungszeit in der Wissensbasis und eine Gesprächsregel, die eine verbindliche Zusage erlaubte. Für die Untersuchung richtet der Betrieb bei Bedarf einen zeitlich begrenzten Testzugang ein oder stellt einen vereinbarten Export bereit. Zugangsdaten erscheinen nicht im Prüfbericht; der Testzugang wird danach deaktiviert.
- Feste Testanrufe und richtige Antworten festlegen
- Wissensbasis, Gesprächsregel, Modell und ausgelöste Schritte getrennt prüfen
- Grenzfälle wiederholt testen und Änderungen vergleichen
- Prüfumfang und benötigten Testzugang vorab festlegen
- Zeitlich begrenzten Testzugang nach Abschluss deaktivieren
- Änderungen nach Wirkung und Aufwand ordnen
Kosten und Leistung
Prüfbericht für eine bestehende KI-Anwendung.
15 Minuten per Telefon oder Video
Nach Ihrer Anfrage wird ein Termin vereinbart. Sie schildern die Anwendung, das erwartete Ergebnis und das aktuelle Problem. Danach erfahren Sie, ob der Prüfbericht zu Ihrer Fragestellung passt.
350 € netto · Prüfung der KI-Anwendung
Sie erhalten einen 4- bis 8-seitigen Prüfbericht mit Systemübersicht, eingegrenzten Fehlerursachen und Empfehlungen zu Qualität, Laufzeit und Kosten.
Umsetzung
Umfang und Preis werden separat vereinbart.
Im Preis enthalten
Ziele und Testfälle
Die erwarteten Ergebnisse und die Eingaben für ihre Prüfung werden gemeinsam festgehalten.
Systemübersicht
Die Ausarbeitung zeigt Datenfluss, Prompts, Modelle, Werkzeuge, Schnittstellen und Abhängigkeiten.
Prüfbericht
Die möglichen Ursachen werden getrennt bewertet. Empfehlungen sind nach Wirkung und Aufwand geordnet.
Aufwand und Kosten
Sie erhalten eine Schätzung für Änderungen, laufenden Betrieb und erkennbare Kostentreiber.
Technik und Rahmenbedingungen
Die Ausarbeitung nennt erforderliche Zugriffe, beteiligte Dienste und relevante technische oder rechtliche Anforderungen.
Eine 30-minütige Ergebnisbesprechung ist enthalten. Technische Umsetzungen, vertiefte Recherchen und organisationsweite Vorhaben werden als separate Projekte mit eigenem Umfang und Preis vereinbart.
Muster-Prüfbericht
So wurde der Fehler im Vielanker-Telefonassistenten eingegrenzt.
Der vierseitige Prüfungsfall zeigt den falschen Testanruf, die getrennten Ursachen und die Korrekturen an Wissensbasis, Gesprächsregel und Übergabe.
Muster-Prüfbericht ansehenKontakt
Welche falsche oder unpassende Antwort liefert Ihr Chatbot oder KI-Agent?
Vorsprung mit KIErstgespräch · Hannover oder remote
Direkter Kontakt vom ersten Gespräch bis zur Ergebnisbesprechung.