[发明专利]投屏方法及设备

说明书

本申请提供一种投屏系统，所述系统包括源设备和汇设备，包括：所述源设备用于：接收到投屏指令，所述投屏指令用于请求将原始图像投射至所述汇设备上显示；将所述原始图像发送给所述汇设备；将所述原始图像输入第一卷积神经网络，得到所述原始图像的a个特征图；将所述a个特征图发送给所述汇设备；所述汇设备用于：将所述原始图像输入第二卷积神经网络，得到所述原始图像的b个特征图；对所述a个特征图和所述b个特征图进行亚像素卷积操作，得到处理后的原始图像，所述处理后的原始图像的分辨率为所述原始图像的分辨率的c倍，其中，a、b和c均为正整数，且csupgt;2/supgt;＝a+b；显示所述处理后的原始图像。

技术领域

本申请涉及计算机领域，具体涉及一种设备间交互方法。

背景技术

投屏是设备之间交互的一个重要场景，是将源设备(source device)上的内容或整个显示界面投射到汇设备(sink device)上。如图1所示，源设备101将图像或视频等多媒体内容103投射到汇设备102上，例如手机将视频投射到电视上。相比于源设备101，汇设备102通常具有更大的屏幕与更高的分辨率，因此对于图像或视频这类媒体内容，将图像投射到汇设备102上时，如果直接对图像进行拉伸以适应汇设备的屏幕大小，会导致图像的显示质量严重下降。显示质量是电视产品的核心卖点之一，因此在投屏场景下需要对投屏的内容进行画质增强。画质增强主要依赖于本机图像处理芯片，现有技术通常在本地进行图像处理等操作，例如在源设备进行图像处理，源设备将处理后的图像发送给汇设备。然而处理后的图像数据量大，会导致投屏过程耗时过长，用户体验较差。

发明内容

本申请提供了一种投屏方法和设备，通过减少源设备和汇设备之间的数据传输，从而减少投屏过程所占用的时间的同时也能对图像进行超分处理，提高图像的分辨率，使得投屏后的图像仍能保证较好的画质。

第一方面，本申请提高一种投屏系统，该系统包括源设备和汇设备，其特征在于，包括：

所述源设备用于：接收到投屏指令，所述投屏指令用于请求将原始图像投射至所述汇设备上显示；将所述原始图像发送给所述汇设备；将所述原始图像输入第一卷积神经网络，得到所述原始图像的a个特征图；将所述a个特征图发送给所述汇设备；

所述汇设备用于：将所述原始图像输入第二卷积神经网络，得到所述原始图像的b个特征图；对所述a个特征图和所述b个特征图进行亚像素卷积操作，得到处理后的原始图像，所述处理后的原始图像的分辨率为所述原始图像的分辨率的c倍，其中，a、b和c均为正整数，且c²＝a+b；显示所述处理后的原始图像。

本申请将投屏过程中的图像处理过程拆分，将对原始图像的特征图提取分成两部分，源设备承担其中一些数量的特征图提取的计算量，输出a个特征图。汇设备承担剩余数量的特征图提取的计算量，输出b个特征图，并且对源设备输出的特征图以及自身输出的特征图进行亚像素卷积操作，生成相对于原始图像超分c倍的图像。源设备和汇设备可同步对原始图像进行特征图的提取，能够提高处理效率。并且源设备向汇设备传输的中间结果包括a个特征图，而特征图是与原始图像一样大小的图像，相比于现有技术将超分后的图像传输给汇设备，本申请在投屏中的数据传输量大幅度的减少，能够减少传输时间。

在一种实现方式中，亚像素卷积操作具体为：

将所述a个特征图和所述b个特征图中每个特征图在相同位置的像素组成所述处理后的原始图像中c×c大小的像素区域。换句话说，将a个特征图和b个特征图中对应于原始图像中同一个像素所在的位置的像素组成处理后的原始图像的一部分像素区域，该像素区域为c×c大小。

在一种实现方式中，源设备还用于：

将所述a个特征图中的一个特征图的数据以及所述a个特征图中除所述特征图之外的其余特征图与所述特征图之间的差值数据发送给所述汇设备。

第二方面，本申请提供一种投屏方法，方法应用于源设备和汇设备，包括：