Transparência operacional

O modelo também precisa ser analisado.

Uma central legível para acompanhar versão, cobertura, desempenho fora da amostra, calibração por faixa de confiança e frescor das fontes. O objetivo é explicar a robustez do produto sem transformar o usuário em operador de MLOps.

Central de análises Abrir Radar Abrir Pente Fino

Produção atual

Estado do modelo publicado

Valores materializados pelo pipeline de serving; não são números demonstrativos da interface.

Versão em produção

catboost-dixoncoles-202607142012

Treinada em 14/07/2026, 17:12

Cobertura combinatória

100%

194 mil previsões · 0 pares ausentes

Base histórica

65,4 mil

Partidas finalizadas · 47,6 mil eventos de gol

Última previsão

21/07/2026, 12:14

Snapshot atualizado em 21/07/2026, 13:15

Seleção por confiança

Cobertura versus precisão

Quanto mais seletivo o recorte, menor a cobertura e maior tende a ser a precisão. Esse trade-off deve aparecer para o usuário, não ficar escondido no pipeline.

Faixa

Todas

Acurácia

53,5%

Cobertura

100,0%

Log loss: 0,959
RPS: 0,191

Faixa

Top 50%

Acurácia

63,9%

Cobertura

50,0%

Log loss: 0,845
RPS

Calibração

Confiança declarada × acerto observado

Barras próximas indicam que a probabilidade comunicada está coerente com a frequência observada no backtest mais recente.

0.3-0.4

n=374

conf. 37,4%real 37,4%

Δ +0,0%

0.4-0.5

n=627

conf. 45,1%real 45,3%

Δ +0,2%

0.5-0.6

n=457

conf. 54,9%real 52,3%

Δ -2,6%

Validação temporal

Walk-forward por período

Cada janela treina apenas com o passado e mede desempenho em um período posterior. É uma leitura mais honesta do que misturar passado e futuro aleatoriamente.

Janela	Teste	Jogos	Acurácia	Log loss	Brier	RPS
test_2025	2025-01-01 → 2025-12-31	2,1 mil	53,5%	0,959	0,571	0,191
test_2023	2023-01-01 → 2023-12-31	2,5 mil	50,6%	0,997	0,596	0,203
test_2021	2021-01-01 → 2021-12-31	2,1 mil	53,3%	0,946	0,563	0,187
test_2019	2019-01-01 → 2019-12-31	1,8 mil	53,4%

Contexto disponível

Cobertura do provedor principal

Volume efetivamente conciliado para escalações, lesões, estatísticas coletivas e estatísticas individuais.

Partidas mapeadas

6,8 mil

Jogadores

12,1 mil

Linhas de escalação

271,9 mil

Registros de lesão

2,5 mil

Stats dos times

11,2 mil

Saúde das fontes

Últimas execuções de ingestão

8 saudáveis · 2 com atenção · 5 falhas no snapshot disponível.

public-web-context

Atenção

Gravados: 275
Requests: 58

Finalizado 21/07/2026, 02:26

transfermarkt

transfermarkt_context

Saudável

Gravados: 5 mil
Requests: 0

Finalizado 12/07/2026, 03:24

O modelo também precisa ser analisado.

Estado do modelo publicado

Cobertura versus precisão

Todas

Top 50%

Confiança declarada × acerto observado

Walk-forward por período

Cobertura do provedor principal

Últimas execuções de ingestão

Top 25%

Top 10%

Pontos que exigem cautela

prediction-audit

api-football