QA
Oktatóvideó
A minőségbiztosítási Node minden beszélgetés befejezése után LLM-minőség-ellenőrzést hajt végre a hívási átiraton. Használja az ügynök teljesítményének értékelésére, a megfelelőségi problémák megjelölésére és a hívások közötti minták feltérképezésére anélkül, hogy manuálisan hallgatná meg a felvételeket.
Amikor fut
A minőségbiztosítási Node csak hívás után fut. Nem része az élő hívásfolyamnak – a beszélgetés befejezése után elolvassa az elkészült átiratot. Nincsenek Edge-ei, és nem tud csatlakozni a workflow másik Node-jához.
Ez azt jelenti, hogy a minőségbiztosítás nem befolyásolja a hívás viselkedését. Csak azt méri.
Ahol a vásznon ül
Adjon hozzá minőségbiztosítási Node-ot bárhol a vásznon. Nem kell csatlakoznia más Node-okhoz – a legtöbb építő oldalra helyezi, hogy egyértelmű legyen, hogy ez egy önálló kiértékelő. A workflow közzététele után a Node minden jogosult hívásnál automatikusan lefut.
A System Prompt konfigurálása
Az alapkonfiguráció egyetlen Rendszerprompt: a felülvizsgáló LLM-nek szóló utasítások, amelyek leírják az egyes hívások értékelését. Az LLM beolvassa az átiratot, és strukturált JSON-eredményt ad vissza.
Az alapértelmezett prompt már a szokásos minőségi dimenziókat tartalmazza:
- Címkék: az átiratban észlelt, névvel ellátott problémák. Az alapértelmezett címkék:
DEAD_AIR,USER_FRUSTRATED,ASSISTANT_IN_LOOP,ASSISTANT_REPLY_IMPROPER,USER_NOT_UNDERSTANDING,HEARING_ISSUES,UNCLEAR_CONVERSATION,USER_REQUESTING_FEATURE,ASSISTANT_LACKS_EMPATHYésUSER_DETECTS_AI. - Hívásminőségi pontszám: 1-10 értékelés
- Általános hangulat: pozitív, semleges vagy negatív
- Összefoglalás: a hívásszegmens 1-2 mondatos leírása
Ha tartományspecifikus értékelésre van szüksége, lecserélheti az alapértelmezett rendszerpromptot saját utasításaival. Írja meg a prompt utasításokat a minőségbiztosítási ellenőrző LLM-nek, és adja meg a visszaadni kívánt JSON-struktúrát.
Megfelelőségi felhasználási esetekben, például:
You are a compliance reviewer for a debt collection workflow.
Review the transcript and return a JSON object with the following fields:
- "identity_verified": true or false — did the agent confirm the caller's identity before discussing the account?
- "options_presented": true or false — did the agent offer all three payment options before accepting a decision?
- "tone_score": 1-5 — how calm and professional was the agent throughout?
- "summary": one sentence describing the call outcome.
További beállítások
| Beállítás | Alapértelmezett | Mit csinál |
|---|---|---|
| Engedélyezve | Be | Váltás a minőségbiztosítás letiltásához a Node eltávolítása nélkül |
| A Workflow LLM | Ki | Ha be van kapcsolva, a workflow-hoz konfigurált LLM-et használja az alapértelmezett minőségbiztosítási modell helyett |
| Minimális hívás időtartama (másodperc) | 15 | Az ennél rövidebb hívások kimaradnak |
| Hangpostahívások belefoglalása | Ki | Kikapcsolt állapotban a hangposta-hívások kimaradnak |
| Mintavételi arány (%) | 100 | Futtassa a minőségbiztosítást a hívások egy százalékán, nem pedig az összesen |
Minőségbiztosítási eredmények megtekintése
A hívás befejezése után a minőségbiztosítási elemzés automatikusan lefut. Az egyes futások eredményeit a Run Detail oldalon tekintheti meg.
Nyissa meg a futtatást, és görgessen a QA Analysis szakaszhoz. Az eredmény a minőségbiztosítási rendszerkérdés által kért teljes JSON-kimenetet mutatja – címkéket, pontszámokat, véleményt és az alapértelmezett prompt összefoglalóját, vagy bármilyen más megadott struktúrát.
Gyakori hibák
Arra számít, hogy a minőségbiztosítás hatással lesz az élő hívásra. A minőségbiztosítási Node futási időben csak olvasható. Értékeli a történteket; ez nem változtat azon, ami történik.
A minőségbiztosítási Node csatlakoztatása más Node-okhoz. A minőségbiztosításnak nincsenek Edge-ei. A minőségbiztosításból egy másik Node-hoz nem lehet kapcsolatot építeni – az Edge-ek visszapattannak, amikor megpróbálja.
Homályos rendszerkérdés írása. "Jó volt az ügynök?" haszontalan pontszámokat produkál. Határozzon meg konkrét, megfigyelhető viselkedéseket és pontosan azokat a JSON-mezőket, amelyeket vissza szeretne kapni.
Nincs megadva a kimeneti formátum. Az LLM követi az Ön utasításait, de ha nem ad meg visszatérési formátumot, a kimenet inkonzisztens lehet a hívások között. Mindig írja le a pontos JSON-struktúrát a Rendszerpromptban.
Következő lépések
Állítsa be a QA által kiértékelt beszélgetési logikát.
A hívás végeredményének elküldése külső rendszereknek a hívás befejezése után.
Ismerje meg, hogyan épül fel a gathered_context a hívás során.
Konfigurálja az utolsó üzenetet, mielőtt a hívás megszakad.