Time Series Lab

베이지안 회귀와 MAP: L1·L2 규제는 왜 사전 분포인가

서론 L1·L2 규제 포스팅의 마지막에 이런 말을 남겼습니다. L2 = 가우시안 사전 분포, L1 = 라플라스 사전 분포. 베이즈 관점에서 규제는 MAP 추정과 동치다. 이 포스팅에서는 그 문장이 왜 성립하는지 따져봅니다. 1. 빈도주의 vs 베이지안 빈도주의: 파라미터 $\mathbf{w}$는 고정된 미지의 상수입니다. 데이터로부...

L1·L2 규제: Lasso와 Ridge의 원리부터 실전까지

서론 모델을 학습하다 보면 훈련 데이터에는 잘 맞지만 새로운 데이터에는 맥을 못 추는 과적합(overfitting) 문제를 자주 마주칩니다. 규제(regularization)는 이 문제를 다루는 대표적인 기법으로, 손실 함수에 패널티 항을 더해 모델이 지나치게 복잡해지는 것을 억제합니다. 이 포스팅에서는 가장 많이 쓰이는 두 가지 규제 방식을 정리...

ARCH·GARCH — 분산이 움직이는 시계열의 변동성 모델링

지금까지 살펴본 ARIMA, ETS, Prophet은 모두 평균(mean)을 예측하는 모형입니다. 잔차의 분산이 시간에 따라 일정하다(등분산, homoskedasticity)는 가정이 깔려 있습니다. 그런데 금융 수익률 데이터는 이 가정을 정면으로 위반합니다. 주가가 급락하는 날에는 변동성이 폭발하고, 조용한 시장에서는 변동이 거의 없습니다. 분산 자...