[发明专利]便携终端装置以及信息处理系统

说明书

技术领域

本发明涉及便携终端装置以及信息处理系统。

背景技术

近年来，在移动电话、汽车导航系统、家庭AV设备等终端中，能够不使用键盘、鼠标等操作部件，而通过辨别语音来容易地进行操作的用户界面正受到关注。

现有技术文献

专利文献1：日本特开2007-41089公报

发明内容

但是，在这些通过语音辨别来进行操作的终端的情况下，产生在图书馆那样的不适宜发出声音的环境、噪音大的环境中无法操作这样的问题。

本发明的目的在于，考虑上述课题，提供在不适宜发出声音的环境、噪音大的环境中，使用便利性也更好的便携终端装置以及信息处理系统。

作为用于解决上述课题的手段，例如采用权利要求书中记载的结构即可。如果列举一个例子的话，采用如下结构，具备：存储部，存储嘴唇动作辨别数据；摄像部，对包含操作者的至少嘴唇部分的影像进行摄影；嘴唇动作辨别部，通过对从摄像部得到的操作者的嘴唇部分的动作数据与嘴唇动作辨别数据进行比较，来辨别要执行的操作；以及控制部，依照嘴唇动作辨别部，进行能够执行的操作。

通过使用本发明的技术，能够提供在不适宜发出声音的环境、噪音大的环境中，使用便利性也更好的便携终端装置以及信息处理系统。

附图说明

图1是示出本发明的实施例的便携终端装置的结构例的框图。

图2是通过语音辨别或者嘴唇动作辨别来进行便携终端的操作的处理的流程图的例子。

图3是示出与便携终端的状态对应的操作选项表格的例子的图。

图4是说明操作决定处理的流程图的例子。

图5是说明获取操作者的语音以及影像的处理的流程图的例子。

图6是示出获取操作者的语音以及影像的处理中的便携终端的显示例的图。

图7是说明语音辨别操作决定处理的流程图的例子。

图8是说明嘴唇动作辨别操作决定处理的流程图的例子。

图9是示出嘴唇的大小的定义的例子的图。

图10是示出嘴唇动作辨别操作决定处理中的嘴唇动作辨别数据与取得嘴唇动作数据的例子的图。

图11是说明嘴唇动作辨别数据更新处理的例子的图。

图12是说明操作对象决定处理的流程图的例子。

图13是说明嘴唇动作辨别类型决定处理的流程图的例子。

图14是示出与操作对应的类型选项表格的例子的图。

图15是说明语音辨别类型决定处理的流程图的例子。

图16是说明嘴唇动作辨别操作对象决定处理的流程图的例子。

图17是说明基于嘴唇动作辨别的操作对象选择处理的流程图的例子。

图18是示出操作对象选择处理中的便携终端的显示例的图。

图19是示出嘴唇动作辨别操作对象决定处理中的嘴唇动作辨别数据与嘴唇动作取得数据的例子的图。

图20是说明语音辨别操作对象决定处理的流程图的例子。

图21是说明嘴唇动作辨别操作决定处理的流程图的第2例。

图22是示出对应于操作选项的元音序列的表格的例。

图23是说明音节元音序列变换处理的流程图的例子。

图24是示出与元音对应的嘴唇形状的一个例子的图。

图25是示出与元音对应的嘴唇的大小的表格的例子的图。

图26是说明获取语音以及影像的处理的流程图的第2例。

图27是示出获取语音以及影像的处理中的显示例的图。

图28是示出本发明的第2实施例的便携终端装置的结构例的框图。

图29是说明本发明的实施例2的操作决定处理的流程图的例子。

图30是示出本发明的第3实施例的便携终端装置的结构例的框图。

图31是示出本发明的第3实施例的由便携终端装置与语音/嘴唇动作辨别服务器构成的信息处理系统的概略结构的框图。

图32(a)是示出本发明的信息处理系统的处理的一个例子的流程图。

图32(b)是示出本发明的信息处理系统的处理的一个例子的流程图。

图33是示出语音/嘴唇动作辨别服务器中的语音/嘴唇动作辨别处理的一个例子的流程图。

图34是示出语音/嘴唇动作辨别服务器中的语音辨别处理的一个例子的流程图。

图35是示出语音/嘴唇动作辨别服务器中的嘴唇动作辨别处理的一个例子的流程图。

符号说明