[发明专利]字幕图像的处理方法和装置

说明书

技术领域

本申请涉及计算机技术领域，具体涉及计算机图像处理领域，尤其涉及字幕图像的处理方法和装置。

背景技术

随着高清和超高清电视的普及，当在高清或超高清电视上播放视频时，一些以图片形式显示的视频字幕的分辨率比较低，为了给观众更好的视觉效果，就需要对字幕进行相应的放大。

现有技术主要有两类放大方法：一类方法是利用预存放大后的字体库对字幕进行放大，当接收到字幕信息后对字幕中的字进行识别并从字体库里找到相应的字体进行显示；另一类方法是把字幕当成图像进行放大，现有技术大多是采用双线性或双立方插值对字幕进行放大。

发明内容

上述技术中，利用预存放大后的字体库对字幕进行放大的技术，由于字体样式多样化，既包含中文又有外文，将所有不同种类语言以及语言的不同字体样式都进行预存储是不现实的，同时与字体库中的字体进行匹配时的准确度也是待考虑的一个问题。采用双线性或双立方插值对字幕进行放大的技术，是对字幕进行简单的插值，由于字幕本来分辨率较低，边界比较粗糙，如果进行简单的插值，视觉效果较差，存在锯齿和模糊现象，特别是在放大倍率较大，例如放大倍率>＝3时，锯齿和模糊现象更为严重。

本申请提供了字幕图像的处理方法和装置。

一方面，本申请提供了一种字幕图像的处理方法，所述方法包括：获取第一字幕图像的放大倍数；根据所述放大倍数，对所述第一字幕图像的YUV分量进行边缘方向的插值上采样，得到第一YUV分量；根据所述放大倍数，对所述第一字幕图像的透明度分量进行插值上采样，得到第一透明度分量；合成所述第一YUV分量与所述第一透明度分量，得到第二字幕图像；基于所述第二字幕图像，得到用于显示的图像。

在某些实施方式中，所述根据所述放大倍数，对所述第一字幕图像的YUV分量进行边缘方向的插值上采样，得到第一YUV分量包括：对所述第一字幕图像的YUV分量进行边缘方向的插值上采样、修正和下采样，得到预处理后的YUV分量；对所述预处理后的YUV分量进行边缘方向的插值上采样，得到所述第一YUV分量。

在某些实施方式中，所述进行边缘方向的插值上采样包括：将待插值图像的每个像素点作为一次插值基准像素点，获取位于一次插值像素点0°、45°、90°和135°方向的梯度差，将最大梯度差的垂直方向作为插值方向进行插值，得到所述一次插值像素点；将所述待插值图像的像素点和所述一次插值像素点作为二次插值基准像素点，获取位于二次插值像素点0°、45°、90°和135°方向的梯度差，将最大梯度差的垂直方向作为插值方向进行插值，得到所述二次插值像素点。

在某些实施方式中，所述获取位于一次插值像素点0°、45°、90°和135°方向的梯度差，将最大梯度差的垂直方向作为插值方向进行插值，得到所述一次插值像素点包括：若所述插值方向在所述一次插值像素点的45°或135°方向，对位于所述插值方向上且分别与所述一次插值像素点相邻的两个一次插值基准像素点进行插值，得到所述一次插值像素点；若所述插值方向在所述一次插值像素点的0°或90°方向，对与所述一次插值像素点相邻的四个一次插值基准像素点进行插值，得到所述一次插值像素点。

在某些实施方式中，所述获取位于二次插值像素点0°、45°、90°和135°方向的梯度差，将最大梯度差的垂直方向作为插值方向进行插值，得到二次插值像素点包括：若所述插值方向在所述二次插值像素点的45°或135°方向，对与所述二次插值像素点相邻的四个二次插值基准像素点进行插值，得到所述二次插值像素点；若所述插值方向在所述二次插值像素点的0°或90°方向，对位于所述插值方向上且分别与所述二次插值像素点相邻的两个二次插值基准像素点进行插值，得到所述二次插值像素点。

在某些实施方式中，在所述对所述第一字幕图像的YUV分量进行边缘方向的插值上采样之后进行修正包括：在进行插值上采样之后的第一字幕图像中，获取原第一字幕图像的像素点在水平方向的梯度G1和在垂直方向的梯度G2；建立梯度-权值映射模型；基于所述G1、G2和所述梯度-权值映射模型，得到原第一字幕图像的像素点水平方向的权值W1和垂直方向的权值W2；基于所述W1、W2和以所述第一字幕图像为待插值图像的二次插值像素点，加权修正所述原第一字幕图像的像素点。

在某些实施方式中，所述基于所述第二字幕图像，得到用于显示的图像包括：对所述第二字幕图像进行反向投影(IBP)修正，得到第三字幕图像，基于所述第三字幕图像，得到所述用于显示的图像。