Pular para o conteúdo

Como a DalvoIA mede

Cinco pilares e vinte indicadores de referência, com fórmulas e exemplos simulados. Esta é a metodologia proposta: não significa que todos os indicadores já estejam disponíveis no painel.

PME que vende pelo WhatsApp · 30 dias. Dados reais só entram com fonte, período e data de atualização.

Resultado financeiro

A IA só cria valor quando a operação consegue atribuir o dinheiro.

Fonte prevista na metodologia: Pedidos pagos, mensalidade, excedente, custo Meta informado e margem da empresa.

Receita recuperada

R$ 6.080 19 pedidos

Fórmula de referência
Vendas recuperadas × ticket médio
O que ele diz
Quanto das oportunidades em risco voltou para a projeção de caixa.
O que fazer com ele
Comparar por canal, período e tipo de venda.

Lucro protegido

R$ 1.702 28% de margem

Fórmula de referência
Receita recuperada × margem de contribuição
O que ele diz
O valor econômico depois de considerar a margem do negócio.
O que fazer com ele
Priorizar intenções e produtos de maior contribuição.

Custo por venda

R$ 31,42 antes da tarifa Meta

Fórmula de referência
Mensalidade + excedente + custo Meta informado ÷ vendas recuperadas
O que ele diz
Quanto a operação investiu para cada venda concluída.
O que fazer com ele
Calibrar modelo, contexto e plano antes da margem escapar.

Payback

5,9 dias projeção de 30 dias

Fórmula de referência
Custo total ÷ benefício bruto diário
O que ele diz
Quando o valor gerado paga o investimento do período.
O que fazer com ele
Validar expansão ou corrigir a ativação.

Autonomia com rede de segurança

Resolver sozinho importa. Saber quando não resolver importa mais.

Fonte prevista na metodologia: Conversas, mudanças de modo, escaladas, retomadas e reaberturas.

Resolução pela IA

58% 731 de 1.260

Fórmula de referência
Resolvidas sem humano e sem reabrir ÷ elegíveis
O que ele diz
A parcela de problemas realmente concluída pela IA.
O que fazer com ele
Promover skills seguras e investigar os principais vazamentos.

Taxa de escalação

14% 176 conversas

Fórmula de referência
Conversas escaladas ÷ conversas elegíveis
O que ele diz
Quanto da operação ainda exige decisão humana.
O que fazer com ele
Separar prudência correta de falta de contexto.

Escalação evitável

4% 7 de 176

Fórmula de referência
Escaladas resolvidas sem decisão nova ÷ escaladas
O que ele diz
Chamadas humanas que uma skill ou conteúdo poderia evitar.
O que fazer com ele
Criar regra, conteúdo ou automação para a causa recorrente.

Taxa de reversão

1,8% 13 ações

Fórmula de referência
Ações corrigidas ou canceladas ÷ ações autônomas
O que ele diz
O custo oculto de decisões que pareciam resolvidas.
O que fazer com ele
Reduzir autonomia da skill se a reversão ultrapassar o gate.

Qualidade verificável

Confiança do modelo é um sinal. Precisão exige evidência.

Fonte prevista na metodologia: Evals, auditoria amostral, Policy Engine e evidências recuperadas pelo RAG.

Precisão contextual

93,3% 112 de 120

Fórmula de referência
Afirmações sustentadas ÷ afirmações factuais avaliadas
O que ele diz
Se a resposta corresponde ao catálogo, memória e política aprovados.
O que fazer com ele
Bloquear promoção quando um fato financeiro falhar.

Alucinação operacional

0,8% 1 de 120

Fórmula de referência
Fatos incorretos sobre preço, estoque ou prazo ÷ avaliados
O que ele diz
A taxa do erro mais perigoso para a operação.
O que fazer com ele
Forçar nova consulta ou escalar antes de executar.

Conformidade de regras

98,3% 118 de 120

Fórmula de referência
Decisões dentro do Policy Engine ÷ decisões avaliadas
O que ele diz
Se descontos, reservas e pagamentos respeitaram a empresa.
O que fazer com ele
Auditar qualquer violação como incidente.

Edição humana

10,8% 13 de 120

Fórmula de referência
Sugestões editadas antes do envio ÷ sugestões revisadas
O que ele diz
Onde a resposta ainda não soa ou decide como a empresa.
O que fazer com ele
Transformar padrões de edição em evals e conteúdo.

Memória e conhecimento

A IA não melhora por lembrar mais. Melhora por lembrar o que ajuda.

Fonte prevista na metodologia: Memórias recuperadas, base ativa, embeddings e intenções observadas.

Uso de memória

61% 769 de 1.260

Fórmula de referência
Conversas elegíveis com memória relevante usada ÷ elegíveis
O que ele diz
Quando histórico e preferência realmente entraram na resposta.
O que fazer com ele
Investigar intenções recorrentes sem memória recuperada.

Utilidade da memória

88% 677 de 769

Fórmula de referência
Memórias que melhoraram o resultado ÷ memórias usadas
O que ele diz
Se lembrar ajudou, em vez de apenas aumentar o prompt.
O que fazer com ele
Expirar memórias irrelevantes e confirmar as sensíveis.

Cobertura da base

82% 41 de 50 intenções

Fórmula de referência
Intenções frequentes com conteúdo aprovado ÷ frequentes
O que ele diz
Quanto da demanda real encontra uma resposta governada.
O que fazer com ele
Preencher primeiro as lacunas de maior volume e valor.

Cobertura de embeddings

97,2% 240 de 247 itens

Fórmula de referência
Itens ativos com vetor válido ÷ itens ativos
O que ele diz
A parcela do catálogo que a busca semântica consegue enxergar.
O que fazer com ele
Reindexar itens órfãos antes de ativar venda autônoma.

Evolução sem regressão

A IA só evoluiu quando resolve mais sem piorar o que já funcionava.

Fonte prevista na metodologia: Evals versionados, releases, roteador, feedback e histórico de promoção.

Aprovação de evals

94% 47 de 50 evals

Fórmula de referência
Cenários aprovados ÷ cenários executados
O que ele diz
A qualidade contra situações esperadas da operação.
O que fazer com ele
Usar como gate sombra → semi → autônomo.

Velocidade de aprendizado

3 dias mediana simulada

Fórmula de referência
Feedback registrado → correção validada
O que ele diz
Quanto a operação demora para transformar erro em melhoria.
O que fazer com ele
Priorizar feedback repetido e de alto impacto financeiro.

Regressões críticas

0 em 30 dias

Fórmula de referência
Evals críticos que falharam após release
O que ele diz
Se uma melhoria nova quebrou uma capacidade já aprovada.
O que fazer com ele
Bloquear promoção e fazer rollback.

Cobertura autônoma

62% 31 de 50 skills

Fórmula de referência
Skills aprovadas em autônomo ÷ skills relevantes
O que ele diz
Quanto do trabalho pode ser delegado com evidência.
O que fazer com ele
Expandir autonomia por skill, nunca por fé no modelo.

De onde vêm os números desta página

Todos os valores acima pertencem a um cenário composto e simulado, não a um cliente. Eles existem para mostrar a forma da conta, não para prometer resultado. Quando houver resultado observado, ele só é publicado com empresa, período, fonte e autorização, e nunca substitui esta simulação em silêncio.

Cenário composto e simulado