麻省理工學院「開放式課程網頁」 | 電機工程與資訊科學 | 6.231 2002秋季課程：動態規劃與隨機控制


課	主題	教科書閱讀分配


1	動態規劃的介紹、例子、問題的描述 Introduction to Dynamic Programming, Examples, Problem Formulation	章節1.1, 1.2 Sections 1.1, 1.2


2	動態規劃的演算法 The Dynamic Programming Algorithm	章節1.3, 1.4 Sections 1.3, 1.4


3	決策系統與最短路徑問題 Deterministic Systems and the Shortest Path Problem	章節2.1, 2.2, 2.3 Sections 2.1, 2.2, 2.3


4	最短路徑演算法 Shortest Path Algorithms	章節4.1 Section 4.1


5	線性二次式的問題，清單控制 Linear Quadratic Problems, Inventory Control	章節4.2, 4.4 Sections 4.2, 4.4


6	停止與列表問題 Stopping and Scheduling Problems	章節4.5, 4.6 Sections 4.5, 4.6


7	決策連續時間最佳控制 Deterministic Continuous-Time Optimal Control	章節3.1, 3.2 Sections 3.1, 3.2


8	Pontryagint最小量原理I The Pontryagin Minimum Principle I	章節3.3 Section 3.3


9	Pontryagint最小量原理II The Pontryagin Minimum Principle II	章節3.4 Section 3.4


10	不完美狀態資訊的問題 Imperfect State Information Problems	章節5.1 Section 5.1


11	不完美狀態資訊的線性二次式問題 Linear Quadratic Problems with Imperfect State Information	章節5.2 Section 5.2


12	有限狀態系統的不完美狀態資訊問題 Imperfect State Information Problems for Finite-State Systems	章節5.4, 5.5 Sections 5.4, 5.5


13	次最佳化控制I Suboptimal Control I	章節6.1, 6.2 Sections 6.1, 6.2


14	次最佳化控制II Suboptimal Control II	章節6.3 Section 6.3


15	首次展示演算法 Rollout Algorithms	章節6.4 Section 6.4


16	次最佳化控制中的額外論題 Additional Topics in Suboptimal Control	章節6.5 Section 6.5


17	無窮地平線問題－推測最短路徑問題 Infinite Horizon Problems - Stochastic Shortest Path Problems	章節7.1, 7.2 Sections 7.1, 7.2


18	無窮地平線問題 Infinite Horizon Problems	章節7.2, 7.3 Sections 7.2, 7.3


19	隨機最短路徑與折扣問題 Stochastic Shortest Path and Discounted Problems	章節7.4 Section 7.4


20	平均成本問題 Average Cost Problems	章節7.5 Section 7.5


21	半Markov問題 Semi-Markov Problems	第二冊章節1.5 Vol. 2, Section 1.5


22	類神經動態規劃I Neuro-Dynamic Programming I	第二冊章節2.3 Vol. 2, Section 2.3


23	類神經動態規劃II Neuro-Dynamic Programming II	第二冊章節2.3 Vol. 2, Section 2.3


24	類神經動態規劃III Neuro-Dynamic Programming III