Como medir ROI de agentes em produção

Piloto sem métrica vira slide. Produção sem métrica vira custo. ROI de agente não se prova com “o modelo acertou no demo” — se prova com tempo, qualidade e receita no processo real.

Por que a métrica errada engana

Otimizar só tokens ou latência do LLM é comum e insuficiente. O valor aparece no processo de ponta a ponta: do lead ao agendamento, do ticket à resolução, do rascunho à publicação aprovada.

A pesquisa Opinion Box (jun/2025, n=1.126; linha WhatsApp no Brasil também em Extra) indica que 59% dos brasileiros não gostam de respostas automáticas. Ou seja: automação sem qualidade percebida destrói ROI mesmo quando o custo de token cai. Já ~79–82% se comunicam com empresas pelo WhatsApp e 60%+ já compraram ou contrataram pelo canal — o volume está no canal certo; o risco está em responder mal em escala.

No lado empresarial, a TIC Empresas 2025 do Cetic.br (PDF) mostra adoção crescente de IA pronta — 50% das grandes já usam IA, majoritariamente comprada. Comprar rápido sem telemetria de execução é a receita clássica de “piloto eterno”.

Os novos resultados da pesquisa TIC Empresas evidenciam maior escala de soluções de IA no mercado, impulsionadas principalmente pelo aumento de seu uso entre as pequenas empresas, embora ainda haja muito espaço para crescimento.

— Alexandre Barbosa, gerente do Cetic.br | NIC.br

Três camadas de medição

1. Eficiência

• Tempo médio por caso antes/depois
• Volume tratado sem intervenção humana
• Tempo médio até primeira resposta (especialmente WhatsApp)

2. Qualidade

• Taxa de retrabalho / correção humana
• Incidentes por mil execuções
• Taxa de aprovação no inbox (quando há human-in-the-loop)
• Taxa de falha de ferramenta (API fora, timeout, dado incompleto)

3. Negócio

• Ciclo de receita acelerado (ex.: lead → agendamento)
• Comparecimento / conversão após handoff
• Churn ou abandono reduzido por resposta mais rápida
• Custo por tarefa concluída (humano + modelo + ferramentas)
• R$ recuperados / custo por real recuperado na carteira (cobrança)

Sem fechar o ciclo até o resultado de negócio, você só mede atividade. O artigo de atribuição do clique ao paciente detalha como ligar mídia, CRM e operação. Para a conta aberta de cobrança (humano × ferramenta × agente): quanto custa cobrar.

Um modelo simples de ROI

Use números da sua operação. Em saúde, o IBGE/SIDRA (tabela 9529) aponta dezenas de milhares de estabelecimentos com 5+ funcionários — o ticket e o custo de no-show variam; a fórmula não. O CFO reporta cerca de 450 mil cirurgiões-dentistas no Brasil: vertical grande, margem sensível a agenda e comparecimento.

Erros comuns

1. Medir só o modelo — ignore o handoff e a fila humana.
2. Somar “casos tratados” sem qualidade — volume com retrabalho é custo disfarçado.
3. Não versionar política — mudança de prompt/regra sem baseline invalida a série.
4. Esquecer governança — incidente único pode zerar meses de “eficiência” (ver governança em 2026).

Como instrumentar na prática

1. Defina o caso de uso e o resultado de negócio (ex.: agendamentos confirmados).
2. Instrumente cada etapa do agente (pedido, aprovação, execução, falha).
3. Cruze com CRM/agenda — não pare no “mensagem enviada”.
4. Revise semanalmente taxa de aprovação, falha e custo por tarefa.
5. Só então escale o próximo agente (checklist de produção).

Marketplace vs construir do zero também entra na conta de ROI: ver marketplace de agentes vs construir.

Perguntas frequentes

Quanto tempo até ver ROI?

Em operações com volume (WhatsApp, triagem, agendamento), sinais de eficiência aparecem em semanas. Receita incremental confiável costuma exigir um ciclo completo de atribuição — frequentemente 30–90 dias.

Qual métrica olhar primeiro?

Taxa de conclusão do fluxo + taxa de intervenção humana + custo por tarefa. Tokens sozinhos não bastam.

ROI negativo no piloto é fracasso?

Não, se você sair com baseline e política claras. Fracasso é escalar sem telemetria.

Como a Chegai ajuda a medir?

A plataforma registra execuções, aprovações e falhas no runtime — a base para as três camadas acima — e conecta o fluxo ao resultado que o negócio já acompanha no CRM.

O agente de cobrança “se paga”?

Quando (R$ extras recuperados − custo do agente) > 0 de forma sustentada, com reclamação sob controle. Abra a conta em quanto custa cobrar e simule em agente de cobrança.

Checklist semanal de ROI (30 minutos)

1. Abrir taxa de conclusão do fluxo principal.
2. Comparar % de handoff humano com a semana anterior.
3. Somar custo estimado (plataforma + tokens + horas de revisão).
4. Cruzar agendamentos/comparecimentos com origem de mídia.
5. Anotar uma mudança de política por vez — nunca três de uma vez.

Esse ritmo evita o clássico “mudamos o prompt e não sabemos se melhorou”. ROI de agente é disciplina operacional, não dashboard decorativo.

Baseline antes do piloto

Sem baseline, qualquer “melhoria” é narrativa. Meça por duas semanas o tempo médio de resposta, a taxa de handoff e o custo por caso antes de ligar o agente. Depois compare a mesma janela com a telemetria de execução.

Se a operação for clínica ou rede, amarre o ROI ao comparecimento — não só ao agendamento criado. O artigo de atribuição e o de WhatsApp até o agendamento fecham esse ciclo. Para ver números de plataforma, comece por cheg.ai/precos.