[发明专利]以悬浮窗显示监控视频的方法、存储介质和设备

说明书

本发明公开了一种以悬浮窗显示监控视频的方法、存储介质和设备，用以解决用户在任意切换其他应用的同时无法查看经网络传输过来的物联网设备捕捉的监控视频画面的问题。一种设备以悬浮窗显示监控视频的方法，包括以下步骤：设备对用户输入的语音信息解析并判断是否与预设的启动命令相匹配，若判断相匹配，则启动后台服务；后台服务创建HandlerThread线程并启动HandlerThread线程；创建接口并传递主线程的handler线程，调用接口的显示函数；设备通过网络获取物联网设备捕捉的监控视频数据；后台服务传递获取到的监控视频数据给窗口显示类；窗口显示类创建布局并在设备的显示屏的应用顶层显示；于布局上创建悬浮窗,并利用悬浮窗在顶层播放监控视频数据。

技术领域

本发明涉及用户界面技术领域，尤其涉及一种以悬浮窗显示监控视频的方法、存储介质和设备。

背景技术

随着科学技术的不断进步，人们使用电子设备而出现的人机交互输入技术也在不断的发展，从普通的鼠标、键盘，到新近比较流行的轨迹球、触摸屏等技术，不一而足。这些技术以其良好的使用性能和输入速度，得到很好的普及和推广，在或将在一段很长的时间里在人机交互输入技术上占据重要的位置。当前的很多软件采取图形用户界面(GUI，Graphical User Interface)的形式，允许用户通过鼠标、键盘、触摸屏等与GUI交互。随着计算机技术的飞速发展，各种便携式可视装备不断涌现，如智能眼镜、智能手表等等。其中，很多装备是不方便用手操作的，语音控制是一种很好的替代方案。

传统的软件用户界面仅考虑可视表现而开发，对于有助于语音交互的界面开发细节关注不够。目前存在各种技术以提供更好的语音人机交互，其中很多注重于创建可结合的更易于语音输入交互的新交互风格，如CommandTalk、ATIS、ELVIS、SUITEKeys等等。SUITEKeys直接模拟用手移动鼠标并且按各个键的交互。这些系统侧重于提供用于口头人机交互的改进型模型，从而在根本上改变交互风格。

近年来，已有一些影响较大的实用的语音识别控制系统推出，如GoogleVoice、Apple Siri等等。Google Voice对语音输入的语法结构和格式要求较高，Apple Siri则更注重结合上下文的语义智能分析。

当前的语音识别控制系统通过语音识别进行语义的智能分析和系统功能的调用。在语音输入的结构上，现有的语音控制系统可以分为两种：一、要求语音输入具备严格的语法结构和格式，否则系统将无法识别。二、对输入没有严格要求，针对用户的语音输入会结合上下文进行语义的智能分析，根据分析的结果进行合适的处理。这类系统更加智能，人机互动方面，表现比较出色。近些年来，在计算机和手机等多媒体电子设备上已经出现了语音识别功能，主要实现替代键盘功能的文本输入功能和替代鼠标等功能的控制命令功能。

本专利申请涉及的就是基于语音识别的人机交互输入控制技术。随着智能显示终端以及物联网技术的普及，特别地当用户在智能终端进行其他操作的同时，如何同时查看其他物联网设备的捕捉视频画面的问题，是相关技术人员关心的问题。

安卓(Android)系统中，悬浮窗的本质其实是继承了视窗(View)，因此悬浮窗需要运行在主线程(UI线程)中，而服务组件架构(Service Component Architecture，简称SCA，也译作服务构件架构，服务组件体系结构，也称Service组件)等并不提供UI线程。应用内部创建的悬浮窗需要通过界面按键触发启动，而Android系统的活动组件(Activity)才支持界面供操作，用户想要查看此悬浮窗，需手动打开此Activity，并触发悬浮窗显示。因此，用户无法在切换其他应用的同时，查看其他物联网设备的捕捉视频画面。用户存在任意切换其他界面的操作，同时也要查看其他物联网设备的捕捉视频画面的需求。

发明内容

本公开的目的在于提供一种以悬浮窗显示监控视频的方法、存储介质和设备，使得用户可以便捷地在任意切换其他应用的同时查看物联网设备捕捉的监控视频画面。