概率规划问题描述可以通过马尔科夫决策过程进行说明，该决策过程的最基本模型可以看作是一个由（）构成的四元组。

A、系统所处的每步状态都是完全可观察的

B、环境状态可以是部分可观察的

C、状态间的转移可以有不确定性，用概率或概率分布来表示

D、马尔科夫性（或状态转移的无后效性）

A、状态、动作、转移概率、策略、折扣因子

B、状态、动作、转移概率、折扣因子、回报函数

C、状态、动作、输入、输出、回报函数

D、状态、动作、值、策略、回报函数

A、状态

B、观察

C、行动

D、状态转移函数

E、策略表示方式

A、状态转移的无后效性

B、系统所处的每步状态完全可以观察

C、状态转移可以有不确定性

D、状态转移的确定性

A、动态规划的核心是基本方程

B、对于同一个动态规划问题，应用顺序和逆序两种解法会得到相同的最优解

C、若动态规划问题的初始状态是已知的，一般采用顺序解法进行求解

D、最优性原理可以描述为策略具有的基本性质是无论初始状态和初始决策如何，对于前面决策所造成的某一状态而言，余下的决策序列必构成最优策略

A、乐观法

B、折中法

C、等值法

D、悲观法

B、分析

C、评估

D、行动

E、反思