浅谈OCR之Onenote 2010
原文:浅谈OCR之Onenote 2010
上一次我们讨论了Tesseract OCR引擎的用法，作为一款老牌的OCR引擎，目前已经开源，最新版本3.0中更是加入了中文OCR功能，再加上Google的更新、维护，可以说是潜力很大，值得期待。
动手学强化学习（二）：马尔可夫决策过程 （Markov decision process，MDP）
马尔可夫决策过程（Markov decision process，MDP）是强化学习的重要概念。要学好强化学习，我们首先要掌握马尔可夫决策过程的基础知识。前两章所说的强化学习中的环境一般就是一个马尔可夫决策过程。与多臂老虎机问题不同，马尔可夫决策过程包含状态信息以及状态之间的转移机制。如果要用强化学习去解决一个实际问题，第一步要做的事情就是把这个实际问题抽象为一个马尔可夫决策过程，也就是明确马尔可夫决策过程的各个组成要素。本章将从马尔可夫过程出发，一步一步地进行介绍，最后引出马尔可夫决策过程。