에 대한 기사: 모델링

백테스팅 오류

개괄 설명



모델 오차는 모델의 백테스팅 예측과 실제 관찰된 값 간의 차이를 나타냅니다. 이는 모델이 현재 적합도로 미래의 홀드아웃 테스트 세트를 얼마나 잘 예측할 수 있는지에 대한 통찰력을 제공하기 위한 것입니다.

이것은 모델의 정확도에 대한 포괄적인 평가가 아니며 MMM을 검증하는 데 사용할 수 없습니다. 검증은 Gound Truth 증분 실험으로만 가능하므로 매우 중요합니다. 사실, 백테스트된 정규화된 평균 제곱근 오차(NRMSE)는 훈련 과정에서 활용되는 여러 최적화 목표 중 하나일 뿐입니다. 모델 오류는 모델의 적합도와 상관관계 예측에 대한 중요하지만 제한된 보기만 제공할 수 있습니다.


오류 파일



예측된 열에는 백테스팅 예측이 포함됩니다. 실제 열에는 관찰된 값이 포함됩니다. 이상적으로는 그 수치에 가깝습니다. 그렇지 않은 경우 모델링되지 않은 성과 요소가 있음을 의미할 수 있습니다. abs_pct_error 열에는 평균 절대 백분율 오차 또는 MAPE가 포함되어 있으며 이는 차이를 보는 또 다른 방법입니다.

업데이트 날짜: 20/09/2022

도움이 되셨나요??

피드백 공유

취소

감사합니다!