ubnt_intrepid https://blog.hatena.ne.jp/ubnt_intrepid/ にっき https://ubnt-intrepid.hatenablog.com/ Machine Learning ここ数ヶ月ぐらい調子が悪い状態が続いていてろくに文章も書けないでいたのだが、急に元気が出てきたので冷めないうちにメモ。 早く回復しないかなぁ… はじめに マルコフ過程 (Markov process) および マルコフ連鎖 (Markov chain) は基本的な確率過程の一つであり、 その扱いやすさからそこらかしこの理論に応用されている、あまりにも有名な確率過程である。 そのマルコフ過程（正確にはマルコフ連鎖）に対し、行動と（その行動を計画する動機を与える）報酬、またはコストを付与したモデルがマルコフ決定過程 (Markov decision process; MDP) である。 この確率過… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fubnt-intrepid.hatenablog.com%2Fentry%2F2016%2F10%2F07%2F025518" title="セミマルコフ決定過程の勉強メモ - にっき" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> http://chart.apis.google.com/chart?cht=tx&chl=%20p%28%5Ctau%7Cs%29%20 Hatena Blog https://hatena.blog 2016-10-07 02:55:18 rich https://ubnt-intrepid.hatenablog.com/entry/2016/10/07/025518 1.0 100%