MAPE, WMAPE, Bias — e o planejador que ignorou tudo isso e tomou a decisão certa mesmo assim.

ANALYTICS & FORECAST

MAPE, WMAPE, Bias — e o planejador que ignorou tudo isso e tomou a decisão certa mesmo assim.

Entender MAPE, WMAPE e Bias é útil. Mas há uma pergunta anterior que raramente é feita: o processo de planejamento da sua empresa usa o número do forecast para tomar decisão — ou ele é mais um dado que entra na reunião e perde para intuição, pressão comercial e histórico de quem grita mais alto?

Tempo de leitura: 12 min


O planejador que não precisava de WMAPE

Numa indústria de alimentos de médio porte, o gerente de PCP tinha 15 anos de casa. Conhecia o comportamento de demanda de cada SKU relevante pela curva de vendas que ele acompanhava manualmente toda semana. Sabia quais clientes compravam de forma irregular, quais tinham padrão previsível, em que meses o pico aparecia e com quanto de antecedência o sinal chegava.

Ele não calculava MAPE. Não sabia o que era Bias no sentido técnico. Tomava decisões de compra que consistentemente acertavam dentro de 12% a 15% da demanda realizada — o que, para o portfólio e o mercado dessa empresa, era suficientemente bom para operar sem ruptura e sem excesso relevante de estoque.

Quando a empresa implantou um sistema de forecast com painel de acurácia por SKU, MAPE por categoria e Bias histórico por canal, esse gerente teve acesso a um repertório técnico que nunca tinha usado. O sistema reportava MAPE médio de 19%. O processo dele entregava resultado equivalente. E ele continuava tomando as mesmas decisões — agora com mais dados disponíveis, mas sem mudar substancialmente o que fazia.

Isso não é argumento contra métricas de forecast. É argumento sobre sequência. A questão não é se MAPE e WMAPE são úteis — são. A questão é se a organização está no ponto em que vai usar essas métricas para mudar decisões. Se não está, a sofisticação técnica é decoração.


O problema anterior às métricas

O artigo sobre MAPE, MAE, WMAPE e Bias começa com um problema real: fornecedores de forecast reportam acurácia de formas que favorecem seus números. A solução proposta é que o comprador tenha repertório técnico para questionar essas escolhas metodológicas.

Isso é necessário. Mas há um problema anterior que o artigo não aborda: em muitas empresas, o forecast não é o número que determina a decisão de compra. É um número que entra no processo e compete com outros números — a previsão do comercial, o histórico de consumo do mês passado, a opinião do diretor que acabou de voltar de uma visita ao maior cliente — e frequentemente perde.

Quando o forecast perde para a intuição do comercial na reunião de S&OP, o MAPE do modelo é irrelevante. A decisão que vai para o sistema de compras não foi gerada pelo modelo — foi gerada pela reunião. E o modelo vai ser medido contra uma realização que foi parcialmente determinada por uma decisão que ignorou o modelo.

Isso cria um ciclo peculiar: o modelo erra porque suas previsões não foram usadas; as previsões não são usadas porque o modelo “erra muito”; o MAPE alto é a prova do problema, não a causa.


MAPE como métrica de processo, não de modelo

Aqui está uma forma diferente de pensar sobre acurácia de forecast que raramente aparece nas discussões técnicas: o MAPE que importa não é o MAPE do modelo estatístico — é o MAPE do número que entrou efetivamente no processo de decisão de compra.

Se o modelo gerou previsão de 1.000 unidades, o comercial ajustou para 1.400 “por causa de uma oportunidade no pipeline”, a reunião de S&OP aprovou 1.200 como compromisso, e a empresa comprou insumo para 1.200 — qual foi o erro de forecast? O modelo errou quanto? O processo errou quanto?

Essas são perguntas diferentes. A maioria das empresas mede o erro do modelo. Poucas medem o erro do processo. E o erro do processo — a distância entre o que foi decidido e o que se realizou, considerando todos os ajustes feitos entre o modelo e a decisão final — é o que realmente determina o custo financeiro da imprecisão.

O que está sendo medidoO que revelaO que não revela
MAPE do modelo estatísticoQualidade técnica do algoritmoSe o modelo está sendo usado para tomar decisões
MAPE do ajuste manual (modelo vs. número ajustado pelo usuário)Se os ajustes humanos melhoram ou pioram o modeloPor que os ajustes estão sendo feitos
MAPE do processo (número aprovado no S&OP vs. realização)Custo real da imprecisão para o negócioQual parte do erro veio do modelo e qual veio do processo de decisão

Em empresas onde os ajustes manuais são sistemáticos e frequentes, o MAPE do modelo pode ser 15% enquanto o MAPE do processo é 30%. Investir em melhorar o modelo de 15% para 10% vai ter impacto mínimo se o processo continua adicionando 15 pontos de erro via ajuste.


O ajuste manual que ninguém mede

O artigo anterior menciona que sistemas auditáveis permitem ao planejador registrar ajustes manuais com justificativa. É uma feature valiosa. O que não é mencionado é o padrão que emerge quando esse histórico é analisado: na maioria das empresas, os ajustes manuais sistematicamente pioram o MAPE em relação ao modelo puro.

Isso não é intuição ruim — é viés estrutural. O comercial que ajusta a previsão para cima está respondendo a incentivos reais: metas de venda, otimismo sobre pipeline, pressão para mostrar crescimento. Esses incentivos existem independentemente do que o modelo diz. O ajuste é racional do ponto de vista individual e subótimo do ponto de vista do processo.

Quando uma empresa começa a medir o MAPE dos ajustes manuais — comparando sistematicamente o número ajustado com a realização, contra o que o modelo teria previsto — o resultado costuma ser desconfortável. Ajustes do comercial pioram o erro em média 8 a 12 pontos percentuais. Ajustes do supply chain, que tendem a ser conservadores, pioram em 4 a 6 pontos. O modelo, em média, acerta mais do que as pessoas que o ajustam.

Essa informação muda a conversa. Deixa de ser “como melhoramos o modelo” e passa a ser “por que estamos ajustando tanto e o ajuste está piorando o resultado”. São perguntas muito diferentes — e a segunda é muito mais difícil de fazer em uma organização onde o ajuste manual é visto como exercício legítimo de julgamento.


Quando WMAPE é a resposta certa para a pergunta errada

WMAPE é tecnicamente superior ao MAPE simples porque pondera o erro pelo volume financeiro de cada SKU. Um erro de 40% num SKU de R$ 500/mês não deveria ter o mesmo peso que um erro de 40% num SKU de R$ 500.000/mês. O WMAPE corrige essa distorção.

Mas há situações onde o WMAPE responde a pergunta errada — e o MAPE simples, apesar de tecnicamente inferior, revela algo que o WMAPE esconde.

Considere uma empresa com 10 SKUs de alto volume e 200 SKUs de baixo volume. O WMAPE vai ser dominado pelos 10 SKUs grandes. Se esses 10 estão com acurácia boa, o WMAPE vai parecer excelente — mesmo que 80% dos SKUs do portfólio tenham previsão ruim.

Isso importa porque os SKUs de baixo volume individualmente podem não ter impacto financeiro relevante — mas coletivamente podem. E porque ruptura num SKU de baixo volume pode ter impacto operacional ou de relacionamento com cliente que o WMAPE não captura. O cliente que compra 10 SKUs diferentes e encontra ruptura em 3 deles, todos de baixo volume, tem uma percepção de serviço que não aparece no WMAPE da empresa.

WMAPE é a métrica certa quando o objetivo é entender impacto financeiro do erro de forecast. Não é a métrica certa quando o objetivo é entender cobertura de serviço ao cliente ou qualidade de planejamento por categoria de produto.


Bias: a métrica mais reveladora — e a menos usada

O Bias é, das quatro métricas do artigo anterior, a que mais frequentemente revela um problema real de processo — e a que menos frequentemente aparece nos relatórios que chegam para gestores.

Um modelo com Bias positivo consistente está sistematicamente superestimando. Em linguagem de negócio: está gerando planos de compra que consistentemente excedem a demanda realizada. O resultado acumulado é estoque. O capital imobilizado nesse estoque tem custo — e esse custo é previsível, porque o Bias é estrutural, não aleatório.

O problema é que Bias positivo raramente é percebido como problema de modelo. É percebido como “mercado abaixo do esperado”, “cliente não confirmou o pedido que estava no pipeline”, “concorrente fez promoção que deslocou nossa demanda”. Cada mês tem uma narrativa. O padrão sistemático fica invisível porque ninguém calculou o Bias acumulado dos últimos 12 meses.

Quando o Bias é calculado e apresentado — não como curiosidade técnica, mas como “nos últimos 12 meses, nossa previsão de demanda foi sistematicamente X% acima da realização, gerando R$ Y de capital imobilizado desnecessariamente” — a conversa muda. Deixa de ser sobre narrativas mensais e passa a ser sobre calibração estrutural do processo de previsão.

Esse é o valor real do Bias. Não como métrica de avaliação de fornecedor — como ferramenta de diagnóstico do próprio processo de planejamento.


A hierarquia do que realmente determina o resultado

Se fosse possível ordenar os fatores que determinam se uma empresa obtém valor do seu processo de forecast — da maior para a menor influência — a ordem provavelmente seria:

  1. O processo de S&OP usa o número do forecast para tomar decisões de compra e produção. Se não usa, nada mais importa.
  2. Há disciplina de registro e análise dos ajustes manuais. Se os ajustes existem mas não são medidos, o processo de melhoria não tem base.
  3. A qualidade dos dados históricos é suficiente para o modelo aprender padrões reais. Dado ruim produz modelo ruim independentemente do algoritmo.
  4. O modelo escolhido é adequado ao perfil de demanda dos SKUs. Aqui entram as discussões técnicas sobre walk-forward, Bias, WMAPE.
  5. A interface é suficientemente usável para que o planejador opere sem fricção. Ferramenta difícil de usar não é usada.

O artigo anterior se concentra no item 4. É o item mais técnico, o mais fácil de articular em perguntas objetivas e o mais confortável de discutir — porque é sobre o fornecedor, não sobre a própria organização. Os itens 1, 2 e 3 são mais difíceis de abordar porque apontam para problemas internos.


O que fazer com esse argumento

Nada aqui invalida o conhecimento técnico sobre métricas de forecast. Saber a diferença entre MAPE e WMAPE é útil. Entender o que Bias revela é genuinamente valioso. Questionar walk-forward versus backtesting na proposta do fornecedor é a prática certa.

O argumento é de sequência, não de substituição. Antes de investir tempo e atenção em dominar a distinção entre métricas de acurácia, vale responder duas perguntas sobre o próprio processo:

  • O número que o modelo de forecast gera hoje chega à decisão de compra sem ser sistematicamente substituído por um número diferente? Se a resposta for não, a prioridade é entender por que o processo rejeita o modelo — não melhorar o modelo.
  • Alguém na empresa calculou o Bias acumulado dos últimos 12 meses e sabe se o processo de previsão sistematicamente superestima ou subestima? Se a resposta for não, há uma informação básica sobre a saúde do processo que não está sendo usada — independentemente de qual sistema de forecast a empresa usa.

Essas duas perguntas não exigem sistema novo, não exigem fornecedor e não exigem repertório técnico avançado. Exigem 30 minutos com uma planilha e honestidade sobre o que os dados mostram. São o ponto de partida mais produtivo para qualquer empresa que quer melhorar seu processo de forecast — com ou sem WMAPE.


A métrica certa para o processo errado não resolve o problema. Resolve a conversa sobre o problema.

O EpiphanyAI é a plataforma de IA Auditável da Direção e Sentido. O módulo de acurácia reporta MAPE, WMAPE e Bias por SKU — e também rastreia o histórico de ajustes manuais versus realização, para que a conversa sobre processo de forecast tenha dados, não narrativas.

→ Fale com um especialista


Continue lendo:

Direção e Sentido Estratégia e Inovação — Mais de 20 anos transformando dados em decisões.

Fale com a equipe EpiphanyAI

Dúvidas sobre IA Auditável, modalidades ou preços? Estamos aqui.

Fale conosco

Entre em contato por e-mail ou redes sociais.

Envie um e-mail

LinkedIn

Ligue para nós

Seg–Sex, 8h às 18h.

(11) 3230-7890

Fale com a gente

Converse com nosso pessoal de São Paulo

Av. Dr. Chucri Zaidan, 296 CJ. 231