Chances subestimadas: calibração de 378 indicações
Em 378 indicações resolvidas, foram 218 vitórias, ante 188 previstas por nós e 207 pelos preços. O que isso diz sobre o modelo e seus limites.
Nesta página
As probabilidades que publicamos têm sido baixas demais para os lados que indicamos. Nas 378 indicações resolvidas em nosso histórico, com jogos de 4 a 31 de outubro, nossas probabilidades para o lado indicado somavam cerca de 188 vitórias esperadas. As indicações venceram 218 vezes. Um modelo de previsão bem calibrado deve chegar perto do total que ele próprio espera; terminamos com 30 vitórias acima disso. Essa é uma falha do modelo, e preferimos dizer isso a deixar que um leitor a descubra.
A verificação, faixa por faixa
Agrupamos todas as indicações resolvidas pela probabilidade que publicamos para o lado indicado e contamos com que frequência esses lados venceram.
| Nossa probabilidade | Indicações | Vitórias | Esperávamos | Taxa de vitória | Nossa probabilidade média |
|---|---|---|---|---|---|
| Abaixo de 40% | 59 | 25 | 22.4 | 42.4% | 38.0% |
| 40% a 50% | 149 | 83 | 66.5 | 55.7% | 44.6% |
| 50% a 60% | 118 | 71 | 64.2 | 60.2% | 54.4% |
| 60% a 70% | 39 | 30 | 25.0 | 76.9% | 64.0% |
| 70% a 80% | 11 | 7 | 8.0 | 63.6% | 73.1% |
| 80% ou mais | 2 | 2 | 1.7 | 100% | 86.3% |
| Todas | 378 | 218 | 187.8 | 57.7% | 49.7% |
A faixa de 40% a 50% responde pela maior parte da diferença. Esses 149 lados venceram em 55.7% das vezes, diante de uma probabilidade média publicada de 44.6%. Esta é uma versão simples de um diagrama de confiabilidade, descrito em o que uma curva de calibração mostra.
É sorte
Se cada indicação fosse independente e nossas probabilidades estivessem corretas, o total costumaria ficar a cerca de 9 ou 10 vitórias de distância de 188. Uma diferença de 30 vitórias é cerca de três vezes isso. As indicações não são totalmente independentes, porém: muitas compartilham o mesmo fim de semana, a mesma liga e o mesmo tipo de jogo, então a variação real é maior do que essa conta sugere. Ainda assim, é difícil atribuir a diferença apenas ao acaso.
O mercado foi melhor
Nas 374 indicações com preço, os melhores preços que vimos implicavam cerca de 207 vitórias. As indicações venceram 215 vezes. Os preços ficaram mais perto da realidade do que nossas probabilidades, o oposto do que um modelo com edge deveria mostrar. Os preços também ficaram abaixo do total real, por 8 vitórias, mas por muito menos do que as nossas 30.
O que isso significa para os edges nos nossos cartões
Um edge é a nossa probabilidade menos a probabilidade implícita no preço. Se nossas probabilidades para os lados indicados estão baixas, os edges que mostramos tendem, na verdade, a estar subestimados em média, e muitos cartões marcados com edge negativo podem não ter edge negativo. Mas as faixas são desiguais: a faixa de 70% a 80% venceu menos do que prevíamos, com apenas 11 indicações. Não vamos ajustar manualmente os números publicados para corrigir isso. Os cartões permanecem como foram publicados, e as indicações são resolvidas com base nesses dados, como explicado em como uma indicação da BAI8 é resolvida no histórico.
O que isso não diz a você
Esta verificação considera apenas o lado que indicamos, e não todos os resultados possíveis de cada cartão, e o lado que indicamos não é escolhido ao acaso. Ela abrange quatro semanas, principalmente de futebol. Um modelo pode ser bem calibrado e ainda assim não superar o mercado, e o inverso também pode acontecer. Para entender o quanto um histórico desse tamanho pode provar, leia quantas apostas são necessárias para um histórico dizer alguma coisa.
18+. Aposte apenas o que você pode perder.
Veja nossa análise do próximo jogo
Treze etapas de pesquisa antes do início: em quem apostar, a odd que vale a pena e por quê. Rode no app em qualquer jogo.
Grátis: 5 análises por mês. Sem cartão.
Perguntas frequentes
As probabilidades do BAI8 estão bem calibradas?
Ainda não, para os lados que indicamos. Nas 378 indicações resolvidas de 4 a 31 de outubro, nossas probabilidades somavam cerca de 188 vitórias esperadas. Foram 218 vitórias. Temos sido cautelosos demais com nossos próprios palpites.
Essa diferença é só sorte?
Provavelmente não toda. A diferença é de cerca de 30 vitórias, e o acaso, por si só, normalmente faria o total variar cerca de 9 ou 10 para mais ou para menos. Mas as indicações não são totalmente independentes, então considere isso uma referência aproximada.
As casas se saíram melhor?
Sim. Nas 374 indicações com preço, as probabilidades implícitas nos preços apontavam para cerca de 207 vitórias, contra 215 observadas. Ficaram mais perto do resultado do que nós.
O BAI8 muda a probabilidade de um cartão após a publicação?
Não. A probabilidade publicada permanece como está, e a indicação é resolvida com essa mesma probabilidade. É isso que torna essa verificação possível.