[发明专利]一种基于视频流的屏幕显示方法、装置和系统

说明书

本发明提供了一种基于视频流的屏幕显示方法、装置和系统。该系统包括：移动设备端，用于采集本终端屏幕的视频流数据，并将所述视频流数据发送给传送端；所述传送端，用于接收所述视频流数据，对所述视频流数据进行解析，并将解析后的视频流数据发送给显示端；以及所述显示端，用于接收所述解析后的视频流数据，并播放所接收到的视频流数据。本发明采用视频流的方式来替代minicap图片采集的方式，解决了现有技术中采用minicap进行屏幕拷贝时严格依赖于移动设备的Android版本和与该Android版本相应的minicap开源项目更新、并且不支持屏幕显示过程中旋转移动设备的问题，特别适用于当通过远程真机租用平台进行移动测试时显示手机端的屏幕信息的场景。

技术领域

本发明涉及远程真机测试技术领域，特别是一种基于视频流的屏幕显示方法、装置和系统、以及计算机存储介质和计算设备。

背景技术

远程真机租用平台是一种远程控制手机使用的平台，具有安装、截图、shell、文件传输等功能。

现有技术中，通过远程真机租用平台进行移动测试时，手机屏幕信息传输的实现方案采用的是开源工具minicap。minicap是开源项目STF(Smartphone Test Farm)中的一个工具，负责屏幕显示。minicap工具是用NDK(Nginx Development Kit)开发的，属于Android的底层开发，所以该工具在手机上的使用严格依赖于手机的Android版本。因此，使用minicap工具进行手机屏幕显示时，会面临以下问题：当手机的Android版本更新时，必须确保minicap发布者已经发布该更新后的Android版本对应的文件工具，才可使用minicap工具。例如，当Android9发布后，由于手机屏幕图像显示依赖的minicap文件还未及时跟上发布，将会导致Android9版本的云真机未能及时上线该真机租用系统。

另外，minicap本身还存在以下问题：minicap的实现方式采用了Android的私有API(Application Programming Interface，应用程序编程接口)，那么，若将来Google限制该API的访问，minicap将会无法使用。而且，minicap工具不支持手机旋转，当手机旋转后，minicap无法正确传递出旋转后的手机屏幕图片。

因此，亟需一种无需与Android版本进行适配、不依赖于minicap开源项目更新、并且屏幕图像传输性能更优的屏幕显示技术。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的基于视频流的屏幕显示方法、装置和系统、以及计算机存储介质和计算设备。

根据本发明实施例的一方面，提供了一种基于视频流的屏幕显示系统，包括：

移动设备端，用于采集本终端屏幕的视频流数据，并将所述视频流数据发送给传送端；

所述传送端，用于接收所述视频流数据，对所述视频流数据进行解析，并将解析后的视频流数据发送给显示端；以及

所述显示端，用于接收所述解析后的视频流数据，并播放所接收到的视频流数据。

可选地，所述屏幕显示系统应用于当通过远程真机租用平台进行移动测试时显示所述移动设备端的屏幕信息的场景。

可选地，所述传送端包括服务器或个人计算机；

所述显示端包括显示器。

可选地，所述移动设备端还用于：

通过在本终端内部启动scrcpy工具来采集本终端屏幕的视频流数据。

可选地，所述移动设备端还用于：

在启动所述scrcpy工具后，调用MediaCodec接口来采集本终端屏幕的视频流数据。