Ícaro Iasbeck
Frameworks e metodologias

Resultado de treinamento: como medir em 4 níveis e 90 dias

A pesquisa de satisfação mede a aula e deixa a diretoria sem saber se o funil mudou. Como medir o resultado de um treinamento de vendas, de CRM ou de IA nos quatro níveis de Kirkpatrick e no ROI de Phillips, com linha de base, grupo de comparação e painel de 90 dias.

18 min de leitura

O resultado de um treinamento de vendas se mede em quatro níveis, reação, aprendizagem, comportamento e resultado, e a medição que convence a diretoria comercial começa antes da turma, com linha de base tirada do CRM, comportamentos combinados com os gestores e, sempre que der, um grupo que ainda não passou pela formação. A evidência de que treinamento corporativo funciona existe: uma meta-análise de 397 efeitos medidos em organizações encontrou efeito médio a grande em todos os níveis, mas só 26 desses efeitos vinham de critérios de resultado para o negócio (Arthur, Bennett, Edens e Bell, 2003). A maior parte das avaliações para antes do ponto que interessa ao diretor comercial.

No fechamento do programa, o T&D apresenta uma média alta de satisfação, a diretoria pergunta o que mudou no funil, e ninguém responde porque ninguém registrou como o funil estava antes. Na maior parte das empresas que atendo, essa conversa decide se o programa ganha a segunda onda ou vira corte no orçamento seguinte. O desenho do programa, do diagnóstico ao reforço das lideranças, está em treinamento de vendas que muda comportamento, e aqui eu trato só da avaliação.

O que é o modelo de Kirkpatrick e o que cada nível mede numa operação comercial?

Donald Kirkpatrick propôs os quatro passos numa série de artigos para diretores de treinamento iniciada em 1959, um passo por artigo. Para o nível de comportamento, ele já pedia uma avaliação antes e depois, feita por mais de uma fonte (o participante, o chefe, os subordinados e os pares), três meses ou mais depois da formação e com um grupo de controle que não recebeu o treinamento (Kirkpatrick, 1959, reimpressão de 1979). A versão atual, mantida pela Kirkpatrick Partners, acrescenta confiança e compromisso ao nível 2, fala em comportamentos críticos e apoio ao desempenho no nível 3 e pede indicadores antecedentes e finais no nível 4 (Kirkpatrick Partners). A mesma página recomenda planejar do nível 4 para o nível 1: você começa pelo indicador do funil que precisa mexer e só depois decide o conteúdo da sala.

A metodologia de ROI do ROI Institute, presidido por Jack Phillips, organiza a avaliação em cinco níveis, com o retorno sobre o investimento no quinto, e propõe um método para separar o efeito do treinamento dos outros fatores e convertê-lo em dinheiro (ROI Institute). A tabela traduz os cinco níveis para uma operação comercial e serve como plano de avaliação que o RH aprova com a diretoria.

Nível Pergunta para a operação O que medir Instrumento e fonte Quando
1. Reação O conteúdo serve para os negócios deste trimestre? Relevância percebida e intenção de aplicar Pesquisa curta com pergunta sobre um negócio real Fim de cada sessão
2. Aprendizagem A pessoa consegue fazer em simulação? Execução, confiança e compromisso Role-play gravado e avaliado com rubrica Antes da turma e no fim do programa
3. Comportamento A pessoa faz com o cliente real? Comportamentos críticos combinados com os gestores Campos do CRM, amostra de gravações, observação do gestor 30, 60 e 90 dias
4. Resultado O indicador da operação mudou? Conversão por etapa, ciclo, desconto ou renovação Relatórios do CRM contra linha de base e grupo de comparação 90 dias e após um ciclo de vendas
5. ROI O ganho pagou o custo? Benefício em margem isolado, sobre o custo total Cálculo de Phillips com premissas aprovadas pelo financeiro Depois da leitura do nível 4

Reação e aprendizagem: o que perguntar e como testar

A reação é o nível mais fácil de medir e o que menos diz sobre os outros três. Os autores da meta-análise de 2003 escrevem que há pouca razão para acreditar que gostar do treinamento informe quanto a pessoa aprendeu, se mudou o que faz no trabalho ou o que a empresa ganhou (Arthur, Bennett, Edens e Bell, 2003). Mantenha a pesquisa curta e inclua uma pergunta de relevância: “em qual negócio aberto você vai usar isto na semana que vem?”. Respostas em branco avisam o fornecedor no primeiro encontro, a tempo de ajustar.

A aprendizagem, numa formação comercial, se mede com o vendedor executando. Grave um role-play com o roteiro de um cliente real antes da primeira sessão, avalie com a rubrica que o gestor vai usar depois e repita no último encontro. A rubrica descreve o que o avaliador observa, como investigar o impacto financeiro antes de apresentar solução e fechar a conversa com próximo passo e data. Prova de múltipla escolha sobre etapas do funil mede memória e prevê pouco do que acontece na reunião com o cliente.

Comportamento e resultado: onde a maior parte das avaliações para

Uma meta-análise de 89 estudos sobre transferência encontrou relação positiva entre aplicar o que se aprendeu e um ambiente de trabalho que apoia essa aplicação, mais forte em habilidades abertas, como desenvolvimento de liderança, do que em habilidades fechadas, como uso de um software (Blume, Ford, Baldwin e Huang, 2010). Venda consultiva é habilidade aberta: cada cliente pede uma combinação diferente de perguntas, e o vendedor repete o comportamento novo quando o gestor pergunta por ele na reunião de pipeline e no 1:1. Por isso o nível 3 entra no plano com um dono na liderança comercial.

Como montar a linha de base antes da formação?

A linha de base é o retrato do funil e do comportamento do time antes da primeira sessão, registrado com data, filtro e definição. Nos programas que acompanho, ela é a etapa que mais fica para depois, porque pede trabalho antes de a turma existir. Sem ela, qualquer número de 90 dias depois vira opinião, e cada parte escolhe a leitura que lhe convém.

Comece pelo nível 4. Escolha com a diretoria um ou dois indicadores que o programa precisa mover, como a conversão de diagnóstico para proposta ou o desconto sobre a primeira proposta. Com os gestores, defina dois ou três comportamentos críticos que explicam esse indicador e que alguém consegue observar no CRM ou numa gravação. Puxe os dois últimos trimestres com o mesmo recorte de equipe, segmento e tipo de negócio, salve os relatórios com nome e data e congele as definições, porque um critério de etapa alterado no meio do programa estraga a comparação.

Para o comportamento, sorteie de cinco a dez reuniões de diagnóstico por vendedor no último trimestre e avalie com a rubrica do role-play, usando avaliadores que não sejam o próprio vendedor. A meta-análise de transferência mostrou que, quando a mesma fonte informa preditor e resultado no mesmo momento de medição, as relações aparecem infladas (Blume, Ford, Baldwin e Huang, 2010).

Quais indicadores de comportamento tirar do CRM e das gravações?

O indicador de comportamento precisa ser observável, depender do vendedor e ter ligação com o resultado escolhido. “Registra dor, impacto e decisor antes de mover o negócio para proposta” funciona, porque o CRM mostra o campo e a gravação mostra se a conversa aconteceu. Os critérios de saída de cada etapa do playbook de vendas costumam ser a melhor fonte desses comportamentos.

Do CRM

O histórico do CRM mostra quatro comportamentos com pouca discussão: a parcela dos negócios que entram em proposta com dor, impacto e decisor registrados; a parcela das reuniões que terminam com próxima atividade agendada no mesmo dia; o tempo entre a reunião e o registro; e o motivo de perda preenchido com categoria e uma frase do cliente.

Das gravações de reunião

Na amostra de reuniões de diagnóstico, meça em que minuto o vendedor fala do produto pela primeira vez, quantas perguntas faz sobre o impacto do problema e se a reunião termina com próximo passo e data combinados com quem decide. A transcrição com IA ajuda a localizar os trechos, e a nota fica com o avaliador treinado.

Em treinamento de CRM e de IA

A estrutura se mantém e os comportamentos mudam. Num programa de adoção de CRM, meça reuniões registradas em até 24 horas, negócios abertos com próxima atividade e uso das listas salvas pelos gestores. Num programa de IA aplicada, meça resumos de reunião aprovados sem edição, uso da biblioteca de prompts e incidentes, como detalho em treinamento de IA para empresas.

Grupo de comparação: como isolar o efeito do treinamento?

Mercado, sazonalidade, mudança de preço ou de comissão mexem no funil no mesmo trimestre do treinamento. A metodologia de Phillips lista o grupo de comparação como a primeira técnica para isolar o efeito, ao lado da análise de tendência, de previsões e de estimativas (ROI Institute). A meta-análise de 2003 excluiu os estudos com um único grupo medido antes e depois (Arthur, Bennett, Edens e Bell, 2003), sinal do peso que a comparação tem nessa evidência.

Na empresa, o grupo de comparação nasce da ordem das turmas. Se o programa vai atender duas regionais ou dois squads, a segunda onda começa noventa dias depois da primeira e serve de comparação nesse intervalo. Compare a variação de cada grupo contra a própria linha de base, porque as equipes partem de carteiras e mercados diferentes. Sem como dividir, use a tendência dos últimos quatro trimestres e a estimativa dos gestores sobre a parcela do ganho que veio do treinamento, com o grau de confiança de cada um, e registre as premissas.

Por que medir em 90 dias?

O prazo segue a recomendação de Kirkpatrick de avaliar comportamento três meses ou mais depois da formação. Campos preenchidos e próxima atividade agendada mexem nas primeiras semanas, e o comportamento na gravação se estabiliza entre 60 e 90 dias se o gestor reforça. A receita segue o ciclo de vendas: numa venda de 60 dias, a leitura de 90 dias já mostra conversão e desconto; numa venda de seis meses, mostra só as etapas iniciais, e a leitura de receita vem depois de um ciclo completo.

ROI de treinamento: como aplicar a metodologia de Phillips

O ROI Institute descreve seis passos: identificar a melhora nos indicadores de impacto, isolar a parte que veio do programa, converter essa parte em dinheiro, somar o custo completo, listar os benefícios intangíveis e comparar benefício e custo. A razão benefício-custo divide o benefício pelo custo, e o ROI divide o benefício líquido pelo custo, em percentual (ROI Institute). O custo completo inclui diagnóstico, desenho, condução, horas dos participantes fora da operação e a própria avaliação.

Num exemplo hipotético, uma equipe de dez vendedores fechou R$ 2.000.000 nos 90 dias anteriores ao treinamento e R$ 2.300.000 nos 90 dias seguintes, alta de 15%. A equipe de comparação, que entra na segunda onda, cresceu 5% no mesmo período. O efeito atribuível fica em 10 pontos sobre a linha de base, ou R$ 200.000 de receita, e com margem bruta de 45% o benefício chega a R$ 90.000. O custo completo soma R$ 60.000: R$ 40.000 de honorários, R$ 15.000 em horas da equipe em sala e R$ 5.000 em tempo dos gestores e análise. A razão benefício-custo é 1,5, e o ROI é de 50% (R$ 30.000 de benefício líquido sobre R$ 60.000).

Com a alta bruta de R$ 300.000, sem comparação e sem margem, a mesma conta chega a 400%, um número que o financeiro desmonta em minutos. Confiança do time, clima e qualidade do registro para o forecast entram no relatório como intangíveis, fora do cálculo.

Painel pós-treinamento: o que acompanhar em 30, 60 e 90 dias?

O painel junta numa tela os níveis 2 a 5, com a linha de base ao lado, e é o instrumento que RH, diretoria e gestores abrem na leitura mensal. Os níveis 3 e 4 se leem para treinados e para a segunda onda, e a estrutura abaixo vale para vendas consultivas.

Indicador Nível Fonte Linha de base 30 dias 60 dias 90 dias Dono
Nota na rubrica de role-play 2 Role-play gravado Antes da turma Último encontro T&D
Propostas com dor, impacto e decisor 3 Campos do CRM Dois trimestres Leitura Leitura Leitura Gestor comercial
Reuniões com próxima atividade no dia 3 Histórico do CRM Dois trimestres Leitura Leitura Leitura Gestor comercial
Minuto da primeira menção ao produto 3 Amostra de gravações Trimestre anterior Amostra Amostra Avaliador
Conversão de diagnóstico para proposta 4 Relatório do CRM Dois trimestres Indicativo Leitura Leitura RevOps
Desconto sobre a primeira proposta 4 Relatório do CRM Dois trimestres Indicativo Leitura Leitura RevOps e financeiro
ROI e razão benefício-custo 5 Cálculo de Phillips Custo total Estimativa Financeiro e RH

Leia a conversão junto com o ciclo e o volume de propostas. Um bom treinamento de diagnóstico costuma fazer o vendedor desqualificar mais cedo, e a quantidade de propostas pode cair enquanto a conversão da proposta sobe.

Como o CRM sustenta a medição do treinamento?

Crie no cadastro de usuário ou de equipe um campo com a onda de treinamento e a data da turma, para filtrar treinados e comparação em qualquer relatório. Os critérios de etapa viram campos obrigatórios na mudança de etapa, e o motivo de perda ganha lista fechada com um campo de texto para a frase do cliente. Duplique cada relatório da linha de base para as leituras de 30, 60 e 90 dias sem mexer no original.

A rotina transforma o painel em gestão. Na reunião de pipeline, o gestor abre a lista de negócios em proposta sem decisor e pergunta pelo comportamento que o treinamento ensinou, o tipo de apoio do ambiente que a meta-análise de transferência associa à aplicação. Uma vez por mês, RH, diretoria comercial e quem responde por RevOps leem o painel por meia hora e decidem o que ajustar no reforço.

Quais são os erros mais comuns ao medir resultado de treinamento?

Tratar a nota de satisfação como prova

A pesquisa de reação mostra se a turma achou o conteúdo relevante e se o instrutor conduziu bem. Apresentada como resultado, ela ensina a diretoria a desconfiar do T&D.

Começar a medir depois da turma

Sem linha de base, o RH reconstrói o “antes” de memória ou puxa um relatório com filtros diferentes, e a diferença mistura treinamento com mudança de critério.

Comparar o patamar em vez da variação

Uma regional com carteira mais madura converte mais que a outra antes e depois de qualquer formação. Interessa quanto cada uma variou contra a própria linha de base no mesmo período.

Pedir receita em 30 dias numa venda de seis meses

O número não mexe, a diretoria encerra o programa e o comportamento novo some antes de chegar à receita. Combine no plano o prazo de cada nível conforme o ciclo.

Medir comportamento pela autoavaliação

O vendedor que responde se passou a investigar melhor tende a dizer que sim. Use CRM, gravação e observação do gestor, e deixe a autoavaliação para medir confiança no nível 2.

Contar receita bruta no ROI

Receita sem margem, sem isolamento e sem as horas da equipe produz um ROI que ninguém defende diante do financeiro. Registre margem, efeito isolado, custo completo e premissas.

O que pedir ao fornecedor antes de contratar?

O fornecedor que sabe medir chega com um plano de avaliação junto da agenda e deixa os instrumentos com a empresa. As perguntas abaixo complementam o checklist de contratação de treinamento de vendas que muda comportamento e tratam só da avaliação.

Para RH e T&D: como conduzir a avaliação

O RH reconhece a necessidade quando o programa anterior foi avaliado só por satisfação, quando a diretoria questiona o orçamento de treinamento sem dado para responder ou quando a mesma demanda volta todo ano com outro fornecedor. Participam do plano a diretoria comercial, que escolhe o indicador de nível 4, os gestores, que definem e reforçam os comportamentos, quem administra o CRM, que monta os relatórios, e o financeiro, que aprova as premissas do ROI. O T&D conduz o plano, guarda a linha de base e marca as leituras na ordem do painel.

Roteiro de 30 dias para a liderança

  1. Escolha o indicador de resultado. Diretoria comercial e RH definem um ou dois indicadores de nível 4 e o prazo de leitura conforme o ciclo de vendas.
  2. Defina os comportamentos críticos. Os gestores escrevem dois ou três comportamentos observáveis e a rubrica para avaliá-los.
  3. Tire a linha de base. Quem administra o CRM salva os relatórios dos dois últimos trimestres com filtros congelados, e o avaliador pontua a amostra de gravações.
  4. Monte o grupo de comparação. Divida as turmas em ondas por regional ou squad e registre no CRM a onda e a data de cada pessoa.
  5. Aplique o role-play inicial. Cada participante grava o role-play com o roteiro de um cliente real e recebe a nota da rubrica.
  6. Leve o comportamento para os rituais. Desde a turma, o gestor pergunta pelos comportamentos críticos na reunião de pipeline e no 1:1.
  7. Faça a primeira leitura e marque as próximas. No dia 30, RH e diretoria leem os indicadores antecedentes contra a linha de base e agendam as leituras de 60 e 90 dias.

Esse plano de avaliação faz parte do treinamento in company de vendas consultivas: defino com a diretoria e o RH o indicador de nível 4 e os comportamentos críticos, tiro a linha de base no CRM e nas gravações, conduzo a prática com role-play avaliado por rubrica e volto para as leituras de 30, 60 e 90 dias. A equipe termina com o playbook de vendas consultivas e o framework de investigação de necessidades escritos sobre os negócios dela, e o RH fica com a rubrica e o painel para as turmas seguintes.

Perguntas frequentes

O que é o modelo de Kirkpatrick?

É um modelo de avaliação de treinamento em quatro níveis: reação, aprendizagem, comportamento e resultado. Donald Kirkpatrick o publicou numa série de artigos iniciada em 1959, e a versão atual recomenda planejar do nível 4 para o nível 1. Numa operação comercial, o nível 3 se mede no CRM e nas gravações, e o nível 4 nos indicadores do funil.

Como calcular o ROI de um treinamento de vendas?

Pela metodologia de Phillips, você isola a parte da melhora que veio do treinamento, converte essa parte em margem e divide o benefício líquido pelo custo completo do programa. O custo inclui honorários, horas da equipe em sala, tempo dos gestores e a avaliação. Receita bruta sem grupo de comparação infla o resultado.

Quanto tempo esperar para medir o resultado de um treinamento?

Campos preenchidos e próxima atividade agendada mexem nas primeiras semanas. O comportamento se lê entre 60 e 90 dias, e Kirkpatrick recomendava avaliar três meses ou mais depois da formação. A receita segue o ciclo de vendas, e numa venda longa a leitura de resultado vem depois de um ciclo completo.

É preciso ter grupo de comparação?

É a forma mais confiável de separar o efeito do treinamento do mercado e da sazonalidade. A saída prática é dividir as turmas em ondas e usar a segunda como comparação por 90 dias. Sem essa possibilidade, use a tendência dos últimos trimestres e a estimativa dos gestores, com as premissas registradas.

Como medir o resultado de um treinamento de CRM ou de IA?

Com a mesma estrutura de níveis e outros comportamentos. Em CRM, meça registro em até 24 horas, negócios com próxima atividade e uso das listas pelos gestores. Em IA, meça resumos aprovados sem edição, uso da biblioteca de prompts e incidentes, sempre contra uma linha de base.

Como preparar o time para a avaliação do treinamento?

Antes da primeira sessão, explique o que será medido, por que algumas reuniões serão gravadas e sorteadas e que a rubrica serve para desenvolvimento, sem ligação com a variável. Mostre ao time a rubrica e os campos do CRM que entram no painel. Com o critério claro, o role-play inicial vira ponto de partida e a leitura de 90 dias vira conversa de 1:1.

  • Resultado de treinamento
  • Treinamento de vendas
  • Avaliação de treinamento
  • T&D
Do texto para a prática

Quer levar isso para o seu time?

No treinamento in company de Vendas Consultivas, o time pratica com as reuniões e as objeções da própria operação e sai com o playbook e o framework de investigação de necessidades.

Levar Vendas Consultivas para o meu time