Erro percentual absoluto médio
O erro percentual absoluto médio (EPAM), também conhecido como desvio percentual absoluto médio, é uma medida de precisão de previsão de um método de previsão em estatística. Ele geralmente expressa a precisão como uma razão definida pela fórmula:
onde At é o valor real e Ft é o valor previsto. A diferença entre eles é dividida pelo valor real At. O valor absoluto dessa razão é somado para cada ponto previsto no tempo e dividido pelo número de pontos ajustados n.
EPAM em problemas de regressão
O erro percentual absoluto médio é comumente usado como uma função de perda em problemas de regressão e na avaliação de modelos, devido à sua interpretação intuitiva em termos de erro relativo.
Definição
Em um contexto de regressão padrão, os dados são descritos por um par aleatório com valores em , e n cópias i.i.d. de . Modelos de regressão buscam encontrar um bom modelo para o par, ou seja, uma função mensurável g de para , tal que seja próximo de Y.
No contexto clássico de regressão, a proximidade de a Y é medida pelo risco L2, também chamado de erro quadrático médio (EQM). No contexto de regressão com EPAM,[1] a proximidade de a Y é medida pelo EPAM, e o objetivo é encontrar um modelo tal que:
onde é a classe de modelos considerados (por exemplo, modelos lineares).
Na prática
Na prática, pode ser estimado pela estratégia de minimização do risco empírico [en], resultando em:
Do ponto de vista prático, o uso do EPAM como função de qualidade para modelos de regressão é equivalente a realizar uma regressão com erro absoluto médio [en] (EAM) ponderado, também conhecida como regressão quantílica. Essa propriedade é trivial, pois:
Como consequência, o uso do EPAM é bastante simples na prática, por exemplo, utilizando bibliotecas existentes para regressão quantílica que permitem pesos.
Consistência
O uso do EPAM como função de perda em análises de regressão é viável tanto do ponto de vista prático quanto teórico, já que a existência de um modelo ótimo e a consistência [en] da minimização do risco empírico podem ser comprovadas.[1]
WEPAM
O WEPAM (por vezes escrito como wEPAM) significa erro percentual absoluto médio ponderado.[2] É uma medida usada para avaliar o desempenho de modelos de regressão ou previsão. Trata-se de uma variante do EPAM em que os erros percentuais absolutos médios são tratados como uma média aritmética ponderada. Geralmente, os erros percentuais absolutos são ponderados pelos valores reais (por exemplo, em previsões de vendas, os erros são ponderados pelo volume de vendas).[3] Isso resolve o problema de "erro infinito". Sua fórmula é:[4]
Onde é o peso, é um vetor dos dados reais e é a previsão ou predição.
No entanto, isso simplifica-se para uma fórmula mais simples:
Confusamente, às vezes, quando as pessoas se referem ao WEPAM, estão falando de um modelo diferente, no qual o numerador e o denominador da fórmula do WEPAM acima são novamente ponderados por outro conjunto de pesos personalizados . Talvez seja mais preciso chamar isso de WEPAM duplamente ponderado (WWEPAM). Sua fórmula é:
Problemas
Embora o conceito de EPAM pareça simples e convincente, ele apresenta grandes desvantagens em aplicações práticas,[5] e há muitos estudos sobre as limitações e resultados enganosos do EPAM.[6][7]
- Não pode ser usado se houver valores zero ou próximos de zero (o que às vezes ocorre, por exemplo, em dados de demanda), pois haveria uma divisão por zero ou valores de EPAM tendendo ao infinito.[7]
- Para previsões muito baixas, o erro percentual não excede 100%, mas para previsões muito altas, não há limite superior para o erro percentual.
- O EPAM penaliza mais fortemente erros negativos, do que erros positivos.[8] Como consequência, quando o EPAM é usado para comparar a precisão de métodos de previsão, ele é tendencioso, selecionando sistematicamente um método cujas previsões são muito baixas. Esse problema pouco conhecido, mas sério, pode ser superado usando uma medida de precisão baseada no logaritmo da razão de precisão (a razão entre o valor previsto e o real), dada por . Essa abordagem leva a propriedades estatísticas superiores e a previsões que podem ser interpretadas em termos da média geométrica.[5]
- Muitas vezes, pensa-se que o EPAM será otimizado na mediana. No entanto, por exemplo, uma distribuição log-normal tem uma mediana de , enquanto seu EPAM é otimizado em .
Para superar esses problemas com o EPAM, outras medidas foram propostas na literatura:
- Erro Absoluto Escalonado Médio [en] (EAEM)
- Erro Percentual Absoluto Médio Simétrico [en] (EPAMS)
- Precisão Direcional Média [en] (PDM)
- Erro Percentual Absoluto Médio Arctangente (EPAAM): O EPAAM pode ser considerado um inclinação como ângulo, enquanto o EPAM é uma inclinação como razão.[7]
Ligações externas
- Erro Percentual Absoluto Médio para Modelos de Regressão
- Erro Percentual Absoluto Médio (EPAM)
- Erros em erros percentuais - variantes do EPAM
- Erro Percentual Absoluto Médio Arctangente (EPAAM)
Referências
- ↑ a b de Myttenaere, B Golden, B Le Grand, F Rossi (2015). "Mean absolute percentage error for regression models", Neurocomputing 2016 Arxiv
- ↑ «Understanding Forecast Accuracy: MAPE, WAPE, WMAPE»
- ↑ «WMAPE: Weighted Mean Absolute Percentage Error»
- ↑ «Statistical Forecast Errors»
- ↑ a b Tofallis (2015). "A Better Measure of Relative Prediction Accuracy for Model Selection and Model Estimation", Journal of the Operational Research Society, 66(8):1352-1362. archived preprint
- ↑ Hyndman, Rob J., and Anne B. Koehler (2006). "Another look at measures of forecast accuracy." International Journal of Forecasting, 22(4):679-688 doi:10.1016/j.ijforecast.2006.03.001.
- ↑ a b c Kim, Sungil and Heeyoung Kim (2016). "A new metric of absolute percentage error for intermittent demand forecasts." International Journal of Forecasting, 32(3):669-679 doi:10.1016/j.ijforecast.2015.12.003.
- ↑ Makridakis, Spyros (1993) "Accuracy measures: theoretical and practical concerns." International Journal of Forecasting, 9(4):527-529 doi:10.1016/0169-2070(93)90079-3