Skip to main content
Erfahre, wie du deine mit Famulor erstellten Voice Agents (Assistenten) mit der Testumgebung von Cledon ganz einfach testen und optimieren kannst.

​
Voraussetzungen

• Ein aktiver Famulor‑Account • Ein Famulor API‑Schlüssel (siehe unten) • Mindestens ein erstellter Assistent in Famulor • Ein Account bei Cledon

​
Einrichtungsprozess

​
1. Registrierung

  1. Erstelle ein Konto auf der Cledon Testplattform.
  2. Bestätige deine E‑Mail und melde dich an.
  3. Optional: Füge weitere Team‑Mitglieder in verschiedenen Rollen (Admin/Editor/Viewer) für kollaboratives Testen hinzu.

​
2. Integration: Famulor per API‑Key verbinden

  1. Navigiere in Cledon zu „Integrations”.
  2. Verbinde deinen Famulor Account über deinen API-Key mit Cledon:
    • Der Schlüssel wird serverseitig verschlüsselt gespeichert.
    • Du kannst den Key jederzeit rotieren oder entfernen.
Hinweis: Deinen Famulor API‑Schlüssel findest/erstellst du im Famulor Dashboard unter Einstellungen → API‑Schlüssel (API Keys). Famulor API-Schlüssel Integration

​
3. Assistenten importieren oder manuell erstellen

Du hast zwei Optionen, um deine Voice Agents/Assistenten in Cledon anzulegen: • Assistenten aus Famulor importieren:
  1. Klicke auf „Assistenten importieren”.
  2. Wähle aus der Liste die gewünschten Assistenten aus deinem Famulor‑Tenant.
  3. Metadaten wie Name, ID, System‑Prompt, Tool Calls und relevante Konfigurationen werden automatisch importiert.
• Manuell erstellen:
  1. Klicke auf „Neuen Agent erstellen”.
  2. Verbinde den Agenten in Cledon manuell mit deinem Assistenten in Famulor durch Vergeben des Namens und Angabe der Assistant ID.
Assistenten Import oder manuelle Erstellung

​
4. Testcases erstellen

Erstelle strukturierte Testfälle, die definieren, was, wie und mit welchem Erwartungswert geprüft wird. Es gibt mehrere Wege: • Basierend auf existierenden Famulor Calls (automatischer Import)
  • Importiere vergangene Anruftranskripte und Ergebnisse direkt aus Famulor.
  • Konvertiere diese in wiederholbare Testcases (inkl. erwarteter Outcomes, Toocalls und Metriken).
• Basierend auf anderen Telefonie‑Transkripten (Copy & Paste)
  • Füge Transkript‑Text aus anderen Plattformen ein.
  • Markiere relevante Abschnitte, definiere erwartete Outcomes (z. B. „Agent fragt nach E‑Mail”, „Termin wird bestätigt”).
• Manuelle Erstellung
  • Definiere manuell Szenario, Eingaben (User‑Utterances), erwartete Agent‑Antworten/Actions und Erfolgskriterien.
Jeder Testcase unterstützt: • Eingabequelle (LLM‑Text oder Voice‑Audio) • Schrittsequenzen (mehrturnige Dialoge) • Assertions (Text‑Match, Intent‑Erkennung, Tool‑Call) Basierend auf deinem definierten Testcase kannst du automatisiert mehrere Szenarien generieren, um eine Vielzahl an verschiedenen möglichen Gesprächen abzutesten. Testcases erstellen Szenarien generieren

​
Testcases und Szenarien

Ein Testcase testet eine Aufagabe deines Assistenten (z.B. die Terminvergabe), während Szenarios verschiedene Ausführungen von möglichen Situationen deiner Aufgabe abbilden (z.B. Terminvergabe: Szenario 1: Terminvergabe an einen älteren schwerhörigen Herren; Szenario 2: Terminvergabe an einen schlechtgelaunten jungen Mann).

​
Testmodi

Du kannst in zwei Ebenen testen: • LLM‑Ebene
  • Direktes Testen der Textlogik: Prompts, Tools, Entscheidungsbäume und Antwortformate.
  • Ideal für schnelle Iteration, deterministische Checks und Prompt‑Feintuning.
• Voice‑to‑Voice
  • End‑to‑End‑Telefonie mit Audio: STT → LLM → TTS, inkl. Pausen, Unterbrechungen, Aussprache, Latenz.
  • Realitätsnahes Testen von Stimmen, Akzenten, Geräuschkulisse und Timing.

​
Ausführung & Reporting

• Einzeltests oder Test-Suites ausführen • Konfigurierbare Wiederholungen und Randomisierung • Detaillierte Protokolle: Turn‑by‑Turn Transkript, Tool‑Calls, Variablen • Ergebnismetriken: Ganze einfach testen und auf einen Blick sehen wie sich deine Voice Agents nach einer Änderung verhalten

​
Best Practices

• Nutze echte Transkripte als Grundlage für Regression‑Tests. • Definiere klare Erfolgskriterien je Use Case (z. B. „Termin erstellt” oder „Qualifizierung komplett”). • Teste mehrturnige Gespräche mit Unterbrechungen und Rückfragen. • Miss Latenz und Fehlerrobustheit (Umgang mit Rauschen, Dialekte, Hintergrundgeräusche). Mehr Informationen hier: Cledon
Passende Seiten: What Is AI Assistant und Prompt And Tools und Assistant Best Practices.