Markov Chain: 1907년 Markov가 제안한 확률모델. 강화학습과 베이지안 확률모델에서 많이 사용됨. Markov Chain은 Markov Property를 가지고 있는 Discrete-Time Stochastic Process (또는 Discrete-Time Random Process)를 의미함.달리 애기하면, 다양한 Random Experiment들의 Trial들에 대한 확률 모델로 "현재의 state만 고려하여 다음 state가 확률적으로 결정되는 Discrete-Time Stochastic Process"임. 주로많은 수의 trial이 이루어지는 먼 미래의 state를 예측 (초기상태에 상관없는)하거나순차적으로 발생하는 확률변수에 대한 값을 예측할 때 이용됨.2022.10.14 - [..