Escore de Brier explicado sem complicação

O escore de Brier mede a distância entre suas probabilidades e a realidade. Em cada previsão, subtraia o resultado, escrito como 1 para “aconteceu” e 0 para “não aconteceu”, da probabilidade informada e eleve a diferença ao quadrado. A média vale zero para um resultado perfeito, 0,25 quando você diz 50% sempre e 1 para o maior erro possível.

O que é o escore de Brier em uma frase e um exemplo?

Em uma frase: o escore de Brier é a média do erro quadrático de previsões probabilísticas, com cada resultado valendo 1 ou 0.

Em um exemplo: você atribui 70% de chance de vitória a uma candidata, e ela vence. O erro é 1 menos 0,70, ou 0,30. Elevado ao quadrado, dá 0,09. Se essa fosse sua única previsão, seu escore de Brier seria 0,09.

A medida nasceu na meteorologia. Glenn Brier a propôs em Verification of Forecasts Expressed in Terms of Probability, publicado na Monthly Weather Review em janeiro de 1950, para avaliar previsões de chuva. Desde então, tornou-se uma das medidas padrão de precisão para probabilidades.

O uso vai muito além do tempo ou da política. Em um estudo brasileiro publicado na Critical Care Science em 2024, pesquisadores validaram um modelo de necessidade de terapia de substituição renal em 8.735 pacientes adultos de 126 UTIs em 2022. O desempenho foi avaliado com gráficos de calibração e escore de Brier, um exemplo concreto de como a mesma conta serve para previsões clínicas.

Qual é a fórmula?

A fórmula, uma vez: o escore de Brier é a média de (p menos o) ao quadrado, em que p é sua probabilidade entre 0 e 1 e o vale 1 se o evento ocorreu e 0 se não ocorreu.

Há uma armadilha. A definição original de Brier, de 1950, soma o erro quadrático de todos os resultados possíveis. Em uma pergunta de Sim ou Não, ela inclui o erro de “Sim” e o de “Não”, variando de 0 a 2. A versão hoje mais usada em perguntas binárias conta apenas um lado e vai de 0 a 1. Uma é o dobro da outra. Mellers e colegas adotaram a versão de 0 a 2 no artigo de 2015 sobre superprevisores. Portanto, uma nota daquela literatura não pode ser comparada diretamente a 0,096 em um padrão binário moderno. Sempre confira a versão antes de comparar.

Um exemplo calculado

São cinco calls, isto é, previsões públicas com identidade e horário, cinco resultados e uma nota. O resultado vale 1 quando o evento ocorreu e 0 quando não ocorreu.

Call	Sua probabilidade	Resultado	Erro	Erro ao quadrado
Governante vence a reeleição	0,85	1	0,15	0,0225
Projeto é aprovado antes de dezembro	0,60	0	0,60	0,3600
Corte de juros na próxima reunião	0,30	0	0,30	0,0900
Time se classifica	0,95	1	0,05	0,0025
Fusão é concluída neste trimestre	0,40	1	0,60	0,3600

Os erros quadráticos somam 0,835. Dividido pelas cinco calls, o escore de Brier é 0,167. As duas calls que mais pesam são aquelas em que houve confiança no lado errado. Esse é o objetivo do quadrado: errar por 60 pontos percentuais custa dezesseis vezes mais do que errar por 15.

Esses números são apenas um exemplo, não calls reais.

Por que 0,25 é o número a lembrar?

0,25 é a nota obtida ao dizer 50% em tudo, sempre. O erro será 0,5, e 0,5 ao quadrado é 0,25. Não importa o resultado nem a dificuldade das perguntas.

Esse valor separa dizer algo de não dizer nada. Acima de 0,25, suas probabilidades foram piores do que inúteis. Você teria se saído melhor sem responder. Abaixo de 0,25, elas continham informação. A distância abaixo desse ponto é a parte interessante.

Qual é um bom escore de Brier?

Não existe um valor universal, pois a nota depende das perguntas. Um previsor que só escolhe quase certezas supera alguém que enfrenta eventos realmente incertos, embora o segundo possa ser mais útil. Um escore sem o conjunto de perguntas não é um fato, é decoração.

Ainda assim, referências publicadas ajudam quando o conjunto e a data acompanham o número.

Previsor ou regra	Escore de Brier	Conjunto de perguntas	Data
Previsor perfeito	0,000	qualquer	por definição
Mediana dos superprevisores, perguntas de mercado	0,074	ForecastBench, N=76	previsões humanas coletadas em julho de 2024
Mediana dos superprevisores, geral	0,096	ForecastBench, N=498	previsões humanas coletadas em julho de 2024
Mediana do público, geral	0,121	ForecastBench, N=498	previsões humanas coletadas em julho de 2024
Melhor modelo de linguagem, Claude 3.5 Sonnet	0,122	ForecastBench, N=498	previsões humanas coletadas em julho de 2024
Dizer 50% sempre	0,250	qualquer	por definição
Previsor errado ao máximo	1,000	qualquer	por definição

As quatro linhas de referência vêm do ForecastBench, padrão dinâmico publicado na ICLR 2025 por Ezra Karger, Philip Tetlock e coautores. Os grupos humanos foram consultados em julho de 2024. Nesse conjunto, os superprevisores superaram tanto o público quanto o melhor modelo de linguagem, com p inferior a 0,001.

Observe como a nota das perguntas de mercado é menor do que a nota geral das mesmas pessoas: 0,074 ante 0,096. As perguntas extraídas de mercados de previsão foram mais fáceis para todos. Por isso, uma nota bruta não pode ser lida como nível de habilidade.

Por que não dá para manipular a nota dizendo 50%?

Porque o escore de Brier é uma regra de pontuação própria. Isso significa que sua melhor nota esperada aparece quando você informa a probabilidade em que de fato acredita. Se você considera um evento 80% provável e escreve 65% para parecer prudente, sua nota esperada piora.

A intuição é simples. Aproximar o número de 50% reduz a punição quando você erra, mas custa mais nos casos em que acerta. Elevar o erro ao quadrado faz da probabilidade honesta a melhor resposta. Essa propriedade torna o escore útil e explica seu uso em torneios desde os anos 1950.

Dizer 50% sempre evita uma nota pior do que 0,25. Também impede qualquer nota melhor do que 0,25. Assim, você nunca demonstra informação.

Escore de Brier ou pontuação logarítmica?

As duas são regras próprias. A diferença está no peso dado a erros confiantes.

O escore de Brier eleva o erro ao quadrado, então a pior previsão isolada custa 1. A pontuação logarítmica usa o logaritmo negativo da probabilidade atribuída ao resultado ocorrido. Se você dá 0% a algo que acontece, o custo tende ao infinito. A regra logarítmica é mais sensível nos extremos e costuma ser preferida quando as caudas importam. Brier é limitado, mais fácil de calcular em média e mais simples de explicar. Por isso, torneios e serviços meteorológicos continuam a usá-lo.

Para a maioria das pessoas, a resposta prática é usar Brier e nunca declarar 0% nem 100%.

O que é um escore de Brier relativo?

É sua nota menos a nota de uma referência nas mesmas perguntas e nos mesmos momentos. Essa é a versão que responde “comparado a quê?”.

A referência pode ser uma regra simples, como a frequência histórica, outro previsor ou um preço de mercado. Em A New Vector Partition of the Probability Score, publicado em 1973, Allan Murphy mostrou que o escore se divide em três partes: a incerteza dos eventos, a calibração das previsões e quanto elas separaram os casos que ocorreram dos que não ocorreram. A primeira parte pertence às perguntas, não ao previsor. Subtrair uma referência é uma forma simples de removê-la.

Isso importa nos mercados de previsão. Os preços são fortes, mas variam entre plataformas e perguntas. Em um estudo com mais de 2.500 mercados políticos nas cinco semanas finais da eleição presidencial dos Estados Unidos de 2024, publicado no SocArXiv em 1º de dezembro de 2025, Joshua Clinton e TzuFeng Huang constataram que 93% dos mercados da PredictIt previram o resultado melhor do que o acaso, ante 78% na Kalshi e 67% na Polymarket. A barreira muda conforme a plataforma. Por isso, a comparação precisa ser contra o preço, não no vazio.

Como a insiderz usa essa medida?

Na insiderz, uma call, isto é, uma previsão pública com identidade e horário, escolhe Sim ou Não em um evento real e inclui a confiança. A call fica travada no instante da publicação, junto com o horário e o preço da Polymarket. Nada pode ser editado ou excluído.

Quando o evento é resolvido, a call é avaliada contra esse preço. A coluna Edge no ranking de insiders mostra a média dessa comparação, indicando quanto as calls ficaram acima ou abaixo do mercado. Bate o mercado conta quantas vezes a pessoa ficou à frente. Os termos Brier e Brier relativo não aparecem no produto, mas são a matemática por trás das colunas.

Leia também calibração, que mede outra falha: se os eventos chamados de 70% acontecem em cerca de 70% das vezes. Um bom escore de Brier exige calibração e disposição para se afastar de 50%. Para avaliar primeiro a qualidade dos preços, veja mercados de previsão são precisos?. Para observar um histórico avaliado, leia como encontrar quem realmente supera o mercado.