[发明专利]一种基于虚拟现实技术的心理评估方法

权利要求书

1.一种基于虚拟现实技术的心理评估方法，其特征在于，包括以下步骤：

S1：选定心理量表；

S2：将所选定的心理量表虚拟场景化，呈现基于特定心理量表设计的评估内容；

S3：实时采集受试者问答数据、行为数据和生理数据；

S4：基于受试者的问答选项，完成心理量表问题的智能跳转；

S5：对量表内容进行综合智能分析，综合智能分析将行为数据通过卷积神经网络训练、问答数据通过循环神经网络训练、生理数据通过卷积神经网络训练后的输出经特征融合后输入到一个softmax层，得出心理评估模型；

S6：采用心理评估模型对受试者初步学习获得的心理评估结果与医生标签进行比对，通过计算损失函数和梯度反向传导，对受试者的问答选项进行智能校正；

S7：再将生理数据、行为数据和经校正的问答选项由心理评估模型计算，从而得到最终综合评估结果。

2.根据权利要求1所述的基于虚拟现实技术的心理评估方法，其特征在于，步骤S4所述心理量表问题的智能跳转，通过设计多种关联条件判断并根据实时情况选择跳转策略；所述跳转策略包括根据医生临床经验量表中相关问题跳转、依据当前答题情况跳转和依据系统实时分析的使用者状态进行跳转。

3.根据权利要求1所述的基于虚拟现实技术的心理评估方法，其特征在于，步骤S5对行为数据进行卷积神经网络的训练过程包括以下步骤：

(1)对视频采集的行为数据分别提取形状信息和光流信息；

(2)对提取的形状信息和光流信息进行预处理，得到卷积神经网络的输入图像；

(3)设置卷积神经网络的参数，将形状信息和光流信息进行预处理后的输入图像分别输入两个卷积神经网络进行训练；

(4)将经两个卷积神经网络处理后的形状信息和光流信息的特征进行融合；

(5)经步骤(4)特征融合后的输出依次输入到后续卷积层、池化层和全连接层。

4.根据权利要求1所述的基于虚拟现实技术的心理评估方法，其特征在于，步骤S5对问答数据在循环神经网络处理的步骤如下：

(1)对语音问答数据进行自然语言处理，将语音数据转化为文本数据；

(2)对文本数据进行编码；

(3)将第一次问答数据输入到循环神经网络；

(4)将本次问答数据与上一步输出结果输入到循环神经网络；

(5)循环步骤(4)，直至问答结束。

5.根据权利要求1所述的基于虚拟现实技术的心理评估方法，其特征在于，步骤S5对生理数据进行卷积神经网络的训练过程包括以下步骤：

(21)对生理数据进行短时傅里叶变换，获取多通道频谱图；

(22)将多通道频谱图采用卷积神经网络进行训练。

6.根据权利要求1所述的基于虚拟现实技术的心理评估方法，其特征在于，所述行为数据包括表情、声音、眼动和肢体动作。

7.根据权利要求1所述的基于虚拟现实技术的心理评估方法，其特征在于，所述生理数据，包括脑电、脑血流、脉搏、心电、肌电、体温、皮电和血氧浓度。

8.根据权利要求1所述的基于虚拟现实技术的心理评估方法，其特征在于，步骤S2所述虚拟场景包括虚拟医生形象设计、虚拟空间设计和虚拟医生问询形式。