O que os modelos conseguem prever?

O que cada modelo recebe e como calcula

Em “X − B0”, o modelo usa a diferença entre X e o B0. Na ENA em % da MLT, 100 é o valor da média de longo termo: “− 100” é quanto a ENA média dos 7 últimos dias fica acima ou abaixo dessa média. p.p. quer dizer ponto percentual.

Os números arquivados do B0 se repetem com o dado do corte?

Cada valor abaixo é o número arquivado na rodada mais recente; a prova de cada um mostra as horas somadas, os arquivos da CCEE capturados até o corte e o resultado da reexecução.

Pesos do último ajuste dos candidatos C2, por segmento

A barra à direita do zero soma ao B0 quando a variável é positiva, e à esquerda subtrai. A linha 1 marca o ponto a partir do qual a correção pela média dos 7 dias amplia o desvio. Os coeficientes são do último ajuste e mudam a cada domingo. No último ajuste, 1 segmento passa de 1 na média dos 7 dias (C2-P W1-S), um sinal de que a correção amplia o desvio recente em vez de reduzi-lo.

Como as fichas dos modelos se comparam lado a lado?

Há entregas suficientes para calibrar uma faixa de incerteza?

A regra pede pelo menos 100 entregas distintas fora do ajuste em cada horizonte. Semanas (W1 a W4) e meses (M1 a M3) têm amostras diferentes.

O círculo é o número de entregas distintas do teste em cada horizonte e o losango, o mínimo da regra de calibração; a diferença aparece escrita. Estado da calibração: amostra insuficiente em todos os horizontes. Sem amostra mínima, a calibração não é avaliada: não se pode dizer que a faixa de algum modelo é confiável.

Quantas previsões em acompanhamento já têm resultado?

Cada previsão com número só ganha realizado quando a entrega termina. A contagem de previsões apuradas não é medida de acerto.

Cada barra soma as previsões com número de um horizonte, separando as que já têm realizado das que aguardam o fim da entrega.

Como o desempenho é medido

Alvo

PLD médio temporal do período de entrega, por submercado, em R$/MWh nominais: média aritmética simples de todas as horas do PLD horário da CCEE na entrega (não é média ponderada pela carga).

Realizado

Média de todas as horas da entrega no PLD horário vigente; só existe quando as 168 horas da semana (ou 24 × dias do mês) estão publicadas. Entrega incompleta não tem realizado.

Entregas

Semanas de sábado 00h (incluído) ao sábado seguinte 00h (excluído), hora de Brasília: W1 é a primeira semana que começa depois do dia de origem (com origem no sábado, a semana em curso não conta), W2 a W4 as seguintes. Meses civis do dia 1º 00h ao dia 1º do mês seguinte 00h (excluído): M1 é o primeiro mês que começa depois do dia de origem, M2 e M3 os seguintes. São 7 horizontes × 4 submercados = 28 células por modelo e rodada.

Dado elegível no corte

Regra de defasagem LAT1D: um dado só entra como informação se o seu período terminou até 1 dia antes do horário de corte (hipótese fixada pela pesquisa antes dos testes).

Erro e viés

Erro = previsão − realizado, em R$/MWh nominais. Viés positivo = o modelo superestimou o PLD em média.

Ganho sobre o B0

Ganho sobre o B0 = MAE do B0 − MAE do modelo nas mesmas células; positivo = melhor que a persistência. Intervalo de 90% por bootstrap de blocos de 28 dias (semanal) ou 91 dias (mensal) de origens, com 1.000 réplicas.

Perda quantílica

Média, nos níveis 5, 10, 25, 50, 75, 90 e 95%, da perda de cada quantil (pinball), em R$/MWh.

Cobertura

Fração das células em que o realizado ficou entre P10 e P90 (nominal 80%) ou entre P5 e P95 (nominal 90%).

Calibração

CALIBRADO quando a cobertura P10 a P90 fica entre 75% e 85% com pelo menos 100 entregas distintas fora do ajuste (regra proposta na governança, a ratificar). Contar entregas, e não origens, evita tratar como independentes as origens que preveem a mesma entrega.

Quantis

Um quantil é o valor que, segundo o modelo, o preço tem uma probabilidade dada de não superar: o quantil de 10% (P10) é o valor que o preço tem 10% de chance de não superar. A pesquisa usa os níveis de 5, 10, 25, 50, 75, 90 e 95%. A faixa entre P10 e P90 pretende conter o preço em 80% dos casos (cobertura nominal); se contém de fato só se sabe com a calibração, verificada nos testes.

Fronteira entre períodos

entregas que atravessam a virada ficam fora dos dois

C1 sem avaliação

A composição do C1 (referências e pesos) está no arquivo de configuração da pesquisa, que não está no repositório nem foi publicado. Sem configuração publicável não há como reimplementar nem auditar o C1; ele segue só como registro da pesquisa.

Controles do teste retrospectivo, executados a cada publicação

Os controles conferem a integridade do cálculo (datas, limites de preço, refazer o B0 por outro caminho). São verificações do próprio observatório: não medem a capacidade de prever e não substituem a revisão independente.