[发明专利]一种基于屏幕内容视频编码的远程桌面共享方法

说明书

本发明请求保护一种基于屏幕内容视频编码的远程桌面共享方法，属于视频信号处理与远程共享技术领域。在主控端，首先要采集图像数据并保存在图像采集缓冲区；然后将采集的设定帧数图像转换为屏幕内容视频流；接着，通过屏幕内容视频编码器生成比特数据流，经信道传输发送到受控端。在受控端，屏幕内容视频解码器将接收的比特数据流解码并转换，在受控端实时显示主控端图像。本发明主要利用屏幕内容视频编码技术特有的自适应彩色转换、帧内块拷贝、调色板模式等多项性能优良的工具，可以达到对屏幕内容，特别是对于处理4K、甚至8K屏幕分辨率图像近似无损压缩的效果，并为后续视频编码技术的应用研究提供支持。

技术领域

本发明属于视频信号处理与远程共享技术领域，涉及一种基于屏幕内容视频编码的远程桌面共享方法。

背景技术

远程桌面控制技术广泛应用于远程办公、远程技术支持、远程交流和远程维护管理等方面，而在远程桌面控制技术中，对实时性和交互性最高的要求之一就是远程桌面的共享技术。

虽然近年来宽带网络和数据传输能力迅速增加，但是仍不能满足对海量高清实时桌面图像的无损传输，所以在传输之前必须要对图像进行压缩编码。但是传统的技术仅仅是在服务器端采用简单的图像编码方法进行压缩，传送到接收端解码之后得到输出图像，这种方法的压缩率有限，特别是对于4K、甚至是8K屏幕分辨率的高清图像的传输，这种缺点尤为突出，常常导致网络拥塞和数据传输延时增大。

新一代高效视频编码HEVC(High Efficiency Video Coding)国际标准于2013年4月正式发布。2016年12月份正式发布的HEVC屏幕内容编码(SCC)标准是HEVC最重要的扩展之一。作为专为屏幕内容传输而研发的高效、低耗编码工具，SCC对屏幕内容编码时，会依据不同的屏幕内容的特点采用不同的压缩方法，即是一种基于内容自适应的编码方式，所以，SCC在满足屏幕内容传输等方面可以发挥重要的作用。

发明内容

本发明旨在解决以上现有技术的问题。本发明提供了一种基于屏幕内容视频编码的远程桌面共享方法，弥补现有技术对于处理共享4K、甚至8K屏幕等高分辨率图像的不足，既能提高视频图像的压缩比，降低所需的传输带宽，减小传输延时，又能提高在远程屏幕共享应用中图像的质量。本发明的技术方案如下：

一种基于屏幕内容视频编码的远程桌面共享方法，在主控端，包括步骤：步骤1：首先对屏幕内容进行图像数据采集，然后将采集的设定帧数图像保存在图像采集缓冲区；步骤2：将图像采集缓冲区中保存的RGB图像转换为视频流；步骤3：把得到的RGB视频流输入屏幕内容视频编码器进行编码，生成比特数据流并输出，经信道传输发送到受控端；

在受控端，包括步骤：步骤4：将接收的比特数据流输入屏幕内容视频解码器进行解码；步骤5：将解码得到的输出视频流转换为设定帧数的RGB彩色空间图像，保证当前PC屏幕显示主控端的实时图像。

进一步的，所述步骤1对屏幕内容进行图像数据采集，其中屏幕内容的显示质量主要由显示器的刷新率和图形处理器GPU的帧率决定，刷新率是指电子束对屏幕上的图像重复扫描的次数，刷新率越高，所显示的图像越稳定，帧率是指GPU每秒能够渲染出新图像的次数。

进一步的，当刷新率为60Hz和帧率为60FPS时，所要采集的屏幕内容图像即为60帧，即把采集的60帧图像保存在图像采集缓冲区中。

进一步的，在步骤2中，所述将图像采集缓冲区中的保存的RGB图像转换为视频流还包括将采集的图像增加时间特性的步骤，以便于在接下来的编码中利用图像之间的时间相关性进行帧间预测。

进一步的，在步骤3中，所述把得到的RGB视频流输入屏幕内容视频编码器进行编码，生成比特数据流并输出，经信道传输发送到受控端，其过程包括以下步骤：