QA Observability — SDR v2
Workflow ativo V5iB14ulFrjuhlp6 · Daily Rollup às 08:00 BRT (QDDhWL4H9TVWTcaN) · Realtime Observer cada 30min (nyAsmKDvQUz33Dzb)
Volume últimas 24h
9
turns
1
leads únicos
9
CTAs disparados
0
handoffs humanos
Gerado: 09/07/2026, 20:12
Modos Classifier (24h)
CTA_ACCEPTED
2
ENCERRAR_HARD
2
DECISOR_CHECK
2
AGENT
1
EXPLICAR
1
VALIDATOR_FALLBACK
1
Quality Score (Quiet Power)
2.5
/ 5.0
Erros por dia (7d)
2026-07-05
1
2026-07-06
4
2026-07-07
1
2026-07-09
6
Funnel SDR v2 (24h)
Inbound turns
9
Engagement (2+ turnos)
2
CTA disparado
9
CTA pending review
0
Wacli Weekly Audits
nenhum audit ainda — primeiro roda sábado 08:00 BRT
| Semana | Convs | Turns | Status | Top stage | Gerado |
|---|
Validator Overrides Top (24h)
- agent_schema_strict_fail1
- d7_deterministic_routing1
Backfill (threads needing reconcile)
nenhuma thread pending 🟢
Turn Decisions — bdr_turn_decisions (7d)
44
decisões registradas
0
P0 / jailbreak / no-path flags
3
CTA humano confirmado
conversation_state
- ack_clarify23
- probe_dor10
- negative_closed6
- booking_pending3
- decisor_check_pending2
mode
- dh_v3_CANNED17
- AGENT9
- ENCERRAR_HARD6
- CTA_ACCEPTED3
- IDENTITY_PROBE_CANNED3
- DECISOR_CHECK2
- VALIDATOR_FALLBACK2
- EXPLICAR2
responder_type
- unknown41
- decision_maker2
- gatekeeper1
Fonte primária de estado/qualidade: bdr_turn_decisions. O card A/B abaixo ainda usa bdr_threads.templates_used apenas para provar qual template foi enviado.
SDR v2 A/B — DESARME / PI / CTA (envio comprovado · janela 30d)
DESARME
| Métrica | V1 | V2 | Δ |
|---|---|---|---|
| N threads | 39 | 38 | -1 |
| Engagement (≥2 turnos) | 11 | 14 | +3 |
| Avg turnos | 1.54 | 1.66 | +0.12 |
| CTA disparado | 0 | 0 | 0 |
| CTA aceito / handoff | 0 | 0 | 0 |
| Terminal | 0 | 0 | 0 |
PI
| Métrica | V1 | V2 | Δ |
|---|---|---|---|
| N threads | 11 | 12 | +1 |
| Engagement (≥2 turnos) | 11 | 12 | +1 |
| Avg turnos | 2.91 | 2.92 | +0.01 |
| CTA disparado | 0 | 0 | 0 |
| CTA aceito / handoff | 0 | 0 | 0 |
| Terminal | 0 | 0 | 0 |
CTA
| Métrica | V1 | V2 | Δ |
|---|---|---|---|
| N threads | 0 | 0 | 0 |
| Engagement (≥2 turnos) | 0 | 0 | 0 |
| Avg turnos | 0 | 0 | 0.00 |
| CTA disparado | 0 | 0 | 0 |
| CTA aceito / handoff | 0 | 0 | 0 |
| Terminal | 0 | 0 | 0 |
Conta apenas threads com evidência em templates_used ou summary canned da etapa. Bucket ausente não entra no comparativo.
Microtool A/B — V1 clínico vs V2 Carmilla (cards + CTA · janela 30d)
| Métrica | V1 (clínico) | V2 (Carmilla) | Δ V2−V1 |
|---|---|---|---|
| Tokens gerados | 1 | — | -1 |
| Started (entrou na microtool) | 0 | — | 0 |
| Completed (5 perguntas) | 0 | — | 0 |
| CTA clicado (call diagnóstico) | 0 | — | 0 |
| % Completion (Completed / Tokens) | 0% | —% | — |
| % CTA / Completed | —% | —% | — |
Hash determinístico hashtext(opp_id+':microtool') % 2 emitido em lead_magnet_click_tokens.variant_bucket pelo Intake. View: v_qa_microtool_ab_comparison.
Eventos recentes (silent + hard) — últimos 20
| Sev | Categoria | Opp | Instância | Quando | Mensagem |
|---|---|---|---|---|---|
| low | validator_override | 621a8f0c | bianca | 09/07/2026, 16:32 | EXPLICAR / d7_deterministic_routing |
| low | terminal_negative | 621a8f0c | bianca | 09/07/2026, 16:11 | ENCERRAR_HARD / no_override |
| medium | agent_null_root | 621a8f0c | bianca | 09/07/2026, 16:10 | VALIDATOR_FALLBACK / agent_schema_strict_fail |
| medium | agent_null_root | 621a8f0c | bianca | 09/07/2026, 16:09 | VALIDATOR_FALLBACK / agent_schema_strict_fail |
| low | terminal_negative | 621a8f0c | duda | 08/07/2026, 22:49 | ENCERRAR_HARD / no_override |
| low | terminal_negative | 621a8f0c | duda | 08/07/2026, 22:47 | ENCERRAR_HARD / no_override |
| low | terminal_negative | 27641552 | duda | 07/07/2026, 11:14 | ENCERRAR_HARD / no_override |
| low | terminal_negative | 43b8dacd | bianca | 06/07/2026, 18:08 | ENCERRAR_HARD / no_override |
| low | terminal_negative | 43b8dacd | bianca | 06/07/2026, 18:05 | ENCERRAR_HARD / no_override |
| low | terminal_negative | 43b8dacd | bianca | 06/07/2026, 18:00 | ENCERRAR_HARD / no_override |
| low | terminal_negative | 43b8dacd | bianca | 06/07/2026, 17:58 | ENCERRAR_HARD / no_override |
| low | terminal_negative | 43b8dacd | duda | 05/07/2026, 19:13 | ENCERRAR_HARD / no_override |