Skip to main content
In einer Simulation spricht ein simulierter Anrufer, der Tester, mit deinem Agenten. Du beschreibst den Tester einmal. Danach führst du die Simulation so oft du willst gegen einen Entwurf oder eine veröffentlichte Version des Agenten aus. Checks bewerten jedes Gespräch eines Durchlaufs. So fällt eine Prompt-Änderung, die ein Gespräch kaputt macht, auf, bevor ein echter Anrufer sie hört. Simulationen findest du an zwei Stellen:
  • Simulationen in der Seitenleiste zeigt alle Simulationen des Accounts mit ihren Durchläufen auf allen Agenten.
  • Der Tab Simulationen eines Agenten zeigt die Simulationen, die diesem Agenten hinzugefügt sind.

Eine Simulation erstellen

Öffne den Agenten und wähle den Tab Simulationen. Wähle Neue Simulation hinzufügen und beschreibe, was du testen willst.
Dialog Neue Simulation mit dem Feld Was möchtest du testen? und den Schaltflächen Simulation manuell erstellen und Mit Charlie fortfahrenDialog Neue Simulation mit dem Feld Was möchtest du testen? und den Schaltflächen Simulation manuell erstellen und Mit Charlie fortfahren
  • Wähle Mit Charlie fortfahren, damit Charlie die Simulation schreibt. Charlie liest den Agenten, legt den Tester, die Variablen und die Antworten der Tools fest und fragt nach, wenn etwas unklar ist.
  • Wähle Simulation manuell erstellen, um das Formular selbst auszufüllen.
Simulationsformular mit Name, Beschreibung des simulierten Anrufers, ausgehender Richtung und dem Agenten, der zuerst sprichtSimulationsformular mit Name, Beschreibung des simulierten Anrufers, ausgehender Richtung und dem Agenten, der zuerst spricht
Nachdem du Erstellen gewählt hast, kannst du im Schritt Checks hinzufügen Checks für die neue Simulation anlegen. Wähle Fertig, um den Schritt zu überspringen. Um eine Simulation aus einem echten Anruf zu erstellen, öffne den Anruf unter Gespräche und wähle Simulation erstellen. Die Schaltfläche erscheint, sobald der Anruf verarbeitet ist und der Anrufer etwas gesagt hat. Charlie baut die Simulation aus dem Transkript, ersetzt personenbezogene Daten durch erfundene Daten und fügt die Simulation dem Agenten des Anrufs hinzu. Um eine Simulation eines anderen Agenten zu nutzen, öffne das Menü neben Neue Simulation hinzufügen und wähle Vorhandene Simulation hinzufügen. Danach teilen sich beide Agenten die Simulation, eine Änderung gilt also für beide. Um sie nur für einen Agenten zu ändern, wähle Duplizieren im Menü der Simulation, bearbeite die Kopie und wähle bei der geteilten Simulation Vom Agenten entfernen.

Eine Simulation ausführen

Stelle vor dem Ausführen sicher, dass der Account eine aktive Telefonnummer hat, die der Agent nutzen kann. Es wird nichts gewählt, aber jeder simulierte Anruf übernimmt diese Nummer als seine eigene. Wähle Ausführen bei einer Simulation. Der Dialog zum Ausführen öffnet sich.
Dialog zum Ausführen mit Zu testende Version, Anzahl der Gespräche auf 4 und dem Hinweis, dass simulierte Anrufe wie normale Anrufe abgerechnet werdenDialog zum Ausführen mit Zu testende Version, Anzahl der Gespräche auf 4 und dem Hinweis, dass simulierte Anrufe wie normale Anrufe abgerechnet werden
  • Zu testende Version ist Entwurf testen, Veröffentlichte Version testen oder eine Version unter Ältere Versionen. Hat der Entwurf Änderungen, ist er ausgewählt, sonst die veröffentlichte Version.
  • Anzahl der Gespräche legt fest, wie viele Gespräche der Durchlauf führt. Wähle 1, 2, 4 oder 6, oder gib eine Benutzerdefinierte Anzahl bis 20 ein.
Alle ausführen startet einen Durchlauf für jede Simulation des Agenten. Sein Dialog fragt nach den Unterhaltungen pro Simulation und zeigt die Gesamtzahl. Auf der accountweiten Seite Simulationen fragt Ausführen auch nach dem Agent. Ist die Simulation noch nicht bei diesem Agenten, fügt Zu diesem Agenten hinzufügen sie hinzu. Solange ein Gespräch neben der Liste geöffnet ist, findest du Ausführen im Menü der Simulation. Während ein Durchlauf den Entwurf testet, speichere keine Änderungen am Entwurf. Ein Speichern während des Durchlaufs lässt seine übrigen Gespräche fehlschlagen. Jeder Durchlauf zeigt seine Gespräche darunter. Ein Account führt bis zu 5 simulierte Gespräche gleichzeitig. Die übrigen Gespräche zeigen Wartet auf den Start, bis ein Platz frei ist.

Die Ergebnisse prüfen

Wähle ein Gespräch, um es neben der Liste zu öffnen. Ein beendetes Gespräch zeigt die Aufnahme, die Ergebnisse der Checks und die Tabs Überblick und Transkription. Während ein Gespräch läuft, siehst du das Live-Transkript. Wähle Zuhören, die Schaltfläche mit dem Kopfhörer, um den Anruf zu hören.
Tab Simulationen eines Agenten mit einem laufenden Gespräch und seinem Live-Transkript neben der Liste der SimulationenTab Simulationen eines Agenten mit einem laufenden Gespräch und seinem Live-Transkript neben der Liste der Simulationen
Sobald die Checks fertig sind, zeigen die Symbole das Ergebnis. Das Symbol eines Gesprächs ist grün, wenn jeder Check bestanden hat, rot, wenn ein Check fehlgeschlagen ist, und orange, wenn ein Check nicht ausgeführt werden konnte. Das Symbol eines Durchlaufs ist grün, wenn jedes Gespräch bestanden hat, rot, wenn die Checks in jedem Gespräch fehlgeschlagen sind, und orange, wenn sie in einigen fehlgeschlagen sind oder nicht ausgeführt werden konnten. Fahre mit der Maus über ein Symbol, um die Details zu sehen. Checks dieses Durchlaufs zeigt für jeden Check, wie viele Gespräche ihn bestanden haben.
Beendeter Simulationsdurchlauf mit seinen Gesprächen, den Ergebnissen der Checks und dem Transkript eines GesprächsBeendeter Simulationsdurchlauf mit seinen Gesprächen, den Ergebnissen der Checks und dem Transkript eines Gesprächs
Im Menü eines Durchlaufs:
  • Erneut ausführen öffnet den Dialog zum Ausführen mit der Version und der Anzahl der Gespräche dieses Durchlaufs. Der neue Durchlauf nutzt die Simulation, wie sie jetzt ist. Bei einem Durchlauf des Entwurfs wählt es den aktuellen Entwurf, oder die veröffentlichte Version, wenn der Entwurf keine Änderungen hat.
  • Durchlauf abbrechen legt laufende Gespräche auf und überspringt die übrigen.
  • Löschen entfernt einen beendeten Durchlauf mit seinen Gesprächen.

Gespräche automatisch prüfen

Ein Check bewertet jedes Gespräch eines Durchlaufs und markiert es als bestanden oder fehlgeschlagen. Wähle Checks auf der Seite Simulationen, im Tab Simulationen eines Agenten oder im Menü einer Simulation. Der Dialog zeigt die Checks für alle Agents und die Checks für den Agenten oder die Simulation, von der aus du ihn geöffnet hast. Für andere Agenten und Simulationen sagt er, wo ihre Checks stehen.
Dialog Checks mit den Abschnitten Alle Agents, dem Agenten und der Simulation, und einem Check im Abschnitt der SimulationDialog Checks mit den Abschnitten Alle Agents, dem Agenten und der Simulation, und einem Check im Abschnitt der Simulation
Wähle Check hinzufügen. Gilt für legt fest, welche Durchläufe der Check bewertet. Es startet mit dem Ort, an dem du Checks geöffnet hast, und du kannst es ändern.
  • Alle Agents gilt für jeden Simulationsdurchlauf im Account. Hat die getestete Version des Agenten das Ergebnis oder das Tool nicht, das der Check nennt, lässt der Durchlauf den Check weg und zeigt eine Warnung. Im Tab eines Agenten zeigt so ein Check Hier nicht geprüft.
  • Ein Agent gilt für jeden Durchlauf dieses Agenten.
  • Eine Simulation gilt für die Durchläufe dieser Simulation, auf jedem Agenten.
Dialog Neuer Check für das Ergebnis roof_check_agreed mit dem erwarteten Wert JaDialog Neuer Check für das Ergebnis roof_check_agreed mit dem erwarteten Wert Ja
Ein neuer, geänderter oder gelöschter Check wirkt nur auf Durchläufe, die nach der Änderung starten. Frühere Durchläufe behalten ihre Checks und Ergebnisse. Jedes Ergebnis ist Bestanden, Fehlgeschlagen oder Konnte nicht geprüft werden. Ein Gespräch zeigt Nicht geprüft, wenn sein Durchlauf vor dem Check endete, zum Beispiel nach Durchlauf abbrechen.

So funktionieren simulierte Anrufe

  • Kein Telefonanruf. Der Agent und der Tester treffen sich in einem Browser-Anruf, und es wird kein Kontakt angelegt. Der Account braucht trotzdem eine Telefonnummer für den Agenten, wie unter Eine Simulation ausführen beschrieben.
  • Tools. Kalender-Tools, SMS, WhatsApp, Rückruf später und Weiterleitungen sind immer simuliert. Es wird also nichts gebucht, gesendet oder weitergeleitet. Deine eigenen Tools laufen nie wirklich. Ohne festgelegte Antwort bekommt jeder Aufruf eine neu generierte Antwort, sodass sich zwei Aufrufe desselben Tools widersprechen können. Lege eine Antwort fest, wenn das Ergebnis wichtig ist. Anruf beenden, Daten erfassen samt Adressprüfung, die Suche in der Wissensdatenbank und die Websuche laufen wie in einem echten Anruf. Die Websuche liefert echte Ergebnisse.
  • Dauer. Ein Gespräch dauert höchstens so lange wie die Maximale Anrufdauer der Simulation, oder kürzer, wenn die maximale Anruflänge des Agenten oder deines Plans kürzer ist.
  • Daten. Jedes Gespräch wird aufgenommen und transkribiert, unabhängig von den Aufnahmeeinstellungen des Agenten und der Einwilligung des Testers, und seine Ergebnisse und erfassten Daten werden analysiert. Simulierte Anrufe erscheinen nicht unter Gespräche und senden keine Webhooks, E-Mails, CRM-Updates oder Workflow-Auslöser. Regeln der Datenaufbewahrung löschen simulierte Anrufe nicht.
  • Abrechnung. Simulierte Anrufe werden wie normale Anrufe abgerechnet.
  • Zeit. Gespräche laufen mit dem aktuellen Datum und der aktuellen Uhrzeit.
  • Grenzen. Der Tester kann den Agenten nicht mitten im Satz unterbrechen. Ein Duo-Agent, der den Browser nutzt, kann noch keine Simulationen ausführen.
Du kannst auch Charlie bitten, Simulationen und Checks für dich zu erstellen, auszuführen und auszuwerten.