[发明专利]一种视觉认知搜索模拟方法、电子设备及存储介质

说明书

本发明实施例提供一种视觉认知搜索模拟方法、电子设备及存储介质，该方法包括：获取多个用户分割子元素信息，对所述多个用户分割子元素信息进行界面显著性分析得到目标用户分割子元素信息；根据所述目标用户分割子元素信息进行效用值评估，得到跳转效用值、继续搜索效用值和返回效用值；根据所述跳转效用值、继续搜索效用值和返回效用值确定搜索结果。通过基于显著性与效用值判断的联合视觉搜索方法符合人眼视觉搜索规律，能较好地对眼动搜索行为进行模拟，因此具有很强的可靠性。

技术领域

本发明涉及信息处理技术领域，尤其涉及一种视觉认知搜索模拟方法、电子设备及存储介质。

背景技术

迭代设计和测试是进行人机交互界面设计的基本过程。该过程中，为了优化设计方案，设计人员通常需要开展用户测试。由于受限于项目及操作成本，参与测试的用户通常很少量。在进行当前人交互界面的设计中，该限制更为严重和突出，设计人员无法在开发周期过程中有效的组织潜在用户群体进行充足的、有效的测试。但是，人机界面设计的高效与否直接决定了用户进行界面搜索的效率，开展高效的、符合潜在用户群体视觉认知特性的人交互界面设计有助于缩短用户的搜索时间，进行更高效的搜索决策，针对用户进行的视觉认知行为建模极为重要。

传统人机交互界面设计的方法，提出的多个界面方案，进行用户迭代测试。其中，依据诸如用户满意度等多项测试评价指标，测试用户需对每个界面方案的测试结果进行评价。评价结果对界面设计过程进行反馈，择优输出其中用户效用最高的界面，在该过程中，可以看到用户测试需要大量人工来完成。测试用户需要对多个界面设计进行有目标的任务实验并且完成测试评价的录入工作。该过程需花费较多的人力物力资源，不利于界面设计快速的产品上线周期，同时该过程评价依赖于测试用户的主观判断，评价结果易受心理偏差的左右，因此评价结果并不准确。

而视觉认知搜索模拟方法能较好的解决这个问题，然而现有技术中的视觉认知搜索模型在测试前往往需要对界面上各个框架部分进行分割，并需要手工标注各视觉对象的基本属性、语义标签以及任务目标。该过程需要投入较多的人工成本，耗时费力，并且当今界面设计中的异性图标存在语义模糊性，因此人工标注存在不准确，不可靠和局限性，同时当前视觉认知模型进行目标匹配所依托的语料库，如LSA、AutoCWW等均是英文语料库，对于非英文的用户界面来说，构建基于语义相似性的视觉认知搜索模型相对困难。

因此如何更好的实现视觉认知搜索模拟已经成为业界亟待解决的问题。

发明内容

本发明实施例提供一种视觉认知搜索模拟方法、电子设备及存储介质，用以解决上述背景技术中提出的技术问题，或至少部分解决上述背景技术中提出的技术问题。

第一方面，本发明实施例提供一种视觉认知搜索模拟方法，包括：

获取多个用户分割子元素信息，对所述多个用户分割子元素信息进行界面显著性分析得到目标用户分割子元素信息；

根据所述目标用户分割子元素信息进行效用值评估，得到跳转效用值、继续搜索效用值和返回效用值；

根据所述跳转效用值、继续搜索效用值和返回效用值确定搜索结果。

更具体的，所述根据所述目标用户分割子元素信息进行效用值评估，得到跳转效用值、继续搜索效用值和返回效用值的步骤，包括:

根据所述目标用户分割子元素信息进行跳转效用值评估，得到跳转效用值；

根据所述目标用户分割子元素信息进行继续搜索效用值评估，得到继续搜索效用值；

根据所述目标用户分割子元素信息进行反馈效用值评估，得到返回效用值。

更具体的，所述根据所述目标用户分割子元素信息进行跳转效用值评估，得到跳转效用值的步骤，具体包括：

对所述目标用户分割子元素信息和当前层级子目标进行视觉相似度估计，得到当前视觉相似度；