Vilmario | IA que Vende
@vilmario.ia
IA QUE VENDE · Operação de agentes

Caderno de Plantão

O que eu checo nos agentes que opero, as formas que eles têm de parar sem gerar erro, e a conta do que custa manter aquilo de pé. Nada aqui é sobre montar agente. É sobre o que vem depois.

Parte 1

Checklist de Plantão

Cada item traz o sintoma que ele revela. Se você não consegue responder um item, ele não está OK: "não medi" nunca vira "está funcionando". Essa é a regra que mais me poupou trabalho.

Escopo e dono

Canais

Segurança

Observabilidade

Configuração

Manutenção

Parte 2

Mapa da Falha Silenciosa

Seis formas de um agente parar de funcionar sem gerar erro nenhum. Todas já me pegaram. Em nenhuma delas o problema era o modelo.

1. Configuração editada sem reinício

O que acontece
Você troca uma chave, um endereço ou uma permissão. O processo continua rodando com o valor antigo em memória.
Por que dói
Ele não para. Continua respondendo, com confiança, usando informação que você já trocou. Já vi um agente afirmar que tinha acesso a uma coisa que ele não tinha mais.
Como checar
Compare a data de modificação do arquivo de ambiente com a hora em que o processo subiu. Arquivo mais novo que o processo é divergência.

2. Serviço morto sem alerta

O que acontece
O processo cai e nada avisa, porque o aviso nunca foi instalado.
Por que dói
A descoberta é por varredura, não por alerta. O tempo entre cair e você olhar é o tamanho do prejuízo, e ninguém está medindo esse tempo.
Como checar
Liste o que deveria estar de pé e compare com o que está. Depois olhe a idade da última mensagem que entrou: fila parada há tempo demais é sinal antes de virar reclamação.

3. Token expirado

O que acontece
A credencial vence em data marcada. Do lado do agente, a integração começa a devolver vazio ou erro que ninguém lê.
Por que dói
Costuma cair num fim de semana ou feriado, e o efeito só aparece na segunda, em forma de cliente sem resposta.
Como checar
Anote a data de expiração de cada token numa lista, com um lembrete alguns dias antes. Não confie em "está funcionando".

4. Arquivo ou pasta renomeada

O que acontece
Alguém do time organiza o Drive, renomeia uma planilha, e o agente perde a referência.
Por que dói
Quem quebrou não sabe que quebrou, e quem opera não foi avisado. É o modo de falha mais comum em operação com time.
Como checar
Referencie por ID, não por nome nem por caminho. Se já está por nome, faça a lista do que depende de qual nome.

5. Sessão de canal caída

O que acontece
A conexão de WhatsApp, e-mail ou rede social cai. A fila continua aceitando mensagem.
Por que dói
A fila cheia parece movimento. Você olha e vê atividade, mas nada está saindo do outro lado.
Como checar
Cheque o pareamento da sessão, não o tamanho da fila. São coisas diferentes e só uma delas prova entrega.

6. Campo de API renomeado

O que acontece
Um fornecedor muda o nome de um campo na resposta. O agente lê vazio e segue.
Por que dói
Ele preenche a lacuna com texto plausível. O resumo continua bonito e o dado por trás sumiu. Você acredita no resumo.
Como checar
Leia o retorno bruto de vez em quando, não o resumo que o agente escreveu. Se um número importante vier vazio, isso precisa gritar em vez de virar frase.
Parte 3

Planilha de Custo de Manutenção

Vem em branco, de propósito. Número de exemplo vira expectativa, e a sua operação não é a minha. O que ela traz pronto são as linhas que quase ninguém lança no mês 1, as fórmulas, e a pergunta que revela cada linha.

Linha de custoA pergunta que revela essa linha
InferênciaQuanto o agente gastou de modelo no mês passado, olhando a fatura e não a estimativa?
InfraestruturaO que você paga de servidor, banco e fila só por causa dele?
CanalVocê paga por conversa, por mensagem ou por número? Esse valor muda com volume?
Ferramentas de terceiroQuais assinaturas existem hoje só porque o agente usa?
Plantão humanoQuantas horas por mês alguém gasta olhando, corrigindo e reiniciando? Vezes quanto custa a hora dessa pessoa?
RetrabalhoQuantas horas o time gastou desfazendo coisa que ele fez errado?
Custo de paradaQuantas horas ele ficou fora no mês, e quanto vale uma hora dessa operação parada?

As três contas que a planilha fecha sozinha

ContaFórmulaPara que serve
Custo total=SOMA(linhas)O número que quase sempre é maior do que a pessoa esperava
Custo por conversa=total/conversasComparável entre meses, ao contrário do total
Custo por resultado=total/resultadosResultado é agendamento, venda ou o que a sua operação conta. É a única das três que decide alguma coisa
Baixar a planilha

Abre no Excel, no Numbers e no Google Sheets. As fórmulas já vêm nas células certas e as três contas se fecham sozinhas. Preencha só a coluna destacada em amarelo. Versão .csv, se preferir.

Se depois de preencher isso o número te assustar

É o resultado mais comum, e não quer dizer que você fez errado. Quer dizer que a conta estava sendo paga sem aparecer. A partir daí são três caminhos: cortar, absorver, ou passar a operação para alguém que já faz isso todo dia.

Eu instalo e opero times de agentes de IA para empresas. Se quiser conversar sobre a sua, o pré-diagnóstico é gratuito e serve inclusive para concluir que não é hora.

Quero o pré-diagnóstico da minha operação