[发明专利]数据处理设备、数据处理方法以及程序

摘要

本发明提供了一种数据处理设备、数据处理方法以及程序，其中，该数据处理设备包括：状态值计算单元，其对于状态转移模型的每个状态计算状态值，其中状态的转移概率越高，该状态值的值越大；行动值计算单元，其对于状态转移模型的每个状态和主体可以执行的每个行动计算行动值，该行动值的值随着转移概率增大而增大；目标状态设置单元，其在状态转移模型的状态当中将行动值的波动大的状态设置为目标状态，该目标状态是通过主体执行的行动要到达的目标；以及行动选择单元，其选择主体的行动以便向目标状态移动。

主权项

一种数据处理设备，包括：状态值计算单元，其基于每个行动的状态转移模型，对于所述状态转移模型的每个状态，计算将所述状态转移模型的预定状态设置为基准的状态值，其中状态转移到所述预定状态附近的状态的概率越高，所述状态值的值越大，在所述状态转移模型中，通过能够行动的主体执行的行动对状态进行转移；行动值计算单元，其基于所述状态转移模型和将所述预定状态设置为基准的状态值，对于所述状态转移模型的每个状态和所述主体能够执行的每个行动计算行动值，其中转移到具有高的将所述预定状态设置为基准的状态值的状态的概率越高，所述行动值的值越大；目标状态设置单元，其基于所述行动值，将所述状态转移模型的状态当中的、所述行动值的波动大的状态设置为目标状态，所述目标状态是通过所述主体执行的行动要到达的目标；以及行动选择单元，其选择所述主体的行动以便向所述目标状态移动。