[发明专利]笔迹同步方法、装置、系统、终端设备及存储介质

权利要求书

1.一种笔迹同步方法，其特征在于，应用于终端设备，所述终端设备包括不可见光摄像模组和可见光摄像模组；所述方法包括：

在数码笔书写时，通过所述不可见光摄像模组采集包括所述数码笔投射在书写面上的光斑的第一图像，以及通过所述可见光摄像模组采集包括所述数码笔和所述书写面的第二图像；所述数码笔包括光发射器，所述光发射器用于发射不可见光，以在所述书写面上形成光斑；所述数码笔的笔尖设置有透光通孔，所述光发射器发射的不可见光通过所述透光通孔投射至所述书写面；

从所述第一图像中识别出一个或多个光斑，并确定所述第一图像中的各个光斑的光斑形状；

将光斑形状与预设形状相匹配的光斑确定为第一图像的有效光斑，并根据所述第一图像的有效光斑生成虚拟笔迹；所述预设形状参考所述透光通孔的形状设置；

识别所述书写面在所述第二图像中占据的图像区域，以及在所述第二图像中识别标识图形，所述标识图形为所述透光通孔的形状；

根据所述标识图形在所述第二图像中的图像位置确定所述数码笔的笔尖在所述第二图像中的图像位置；

将所述数码笔的笔尖在所述第二图像中的图像位置确定为所述数码笔在所述第二图像中的图像位置，并根据所述数码笔的图像位置与所述书写面的所述图像区域确定所述书写面与所述数码笔的第一相对位置；

将所述第一相对位置转换为虚拟笔迹与虚拟的书写展示页面的第二相对位置；

基于所述第二相对位置在所述书写展示页面上输出所述虚拟笔迹。

2.根据权利要求1任一所述的方法，其特征在于，所述数码笔还包括：压力传感器，所述压力传感器用于检测所述数码笔的笔尖受到的压力；以及，所述光发射器，还用于在所述压力传感器检测到的压力超过压力阈值时发射不可见光。

3.根据权利要求2所述的方法，其特征在于，所述数码笔与所述终端设备之间建立通信连接；以及，所述通过所述不可见光摄像模组采集包括所述数码笔投射在书写面上的光斑的第一图像，以及通过所述可见光摄像模组采集包括所述数码笔和所述书写面的第二图像，包括：

在接收到所述数码笔发送的书写触发信号时，通过所述不可见光摄像模组采集包括所述数码笔投射在书写面上的光斑的第一图像，并通过所述可见光摄像模组采集包括所述数码笔和所述书写面的第二图像，其中，所述书写触发信号是所述数码笔在所述压力传感器检测到的压力超过所述压力阈值时通过所述通信连接发送的可见光摄像。

4.一种笔迹同步系统，其特征在于，所述系统包括：终端设备和数码笔；所述终端设备包括不可见光摄像模组和可见光摄像模组，所述数码笔包括光发射器；

所述数码笔，用于在书写面上书写时，通过所述光发射器发射不可见光，以在所述书写面上形成光斑；所述数码笔的笔尖设置有透光通孔，所述光发射器发射的不可见光通过所述透光通孔投射至所述书写面；

所述终端设备，用于通过所述不可见光摄像模组采集包括所述数码笔投射在书写面上的光斑的第一图像，以及通过所述可见光摄像模组采集包括所述数码笔和所述书写面的第二图像；以及，

用于从所述第一图像中识别出一个或多个光斑，并确定所述第一图像中的各个光斑的光斑形状；将光斑形状与预设形状相匹配的光斑确定为第一图像的有效光斑，并根据所述第一图像的有效光斑生成虚拟笔迹；所述预设形状参考所述透光通孔的形状设置；

所述终端设备，还用于识别所述书写面在所述第二图像中占据的图像区域，在所述第二图像中识别标识图形，所述标识图形为所述透光通孔的形状；以及，根据所述标识图形在所述第二图像中的图像位置确定所述数码笔的笔尖在所述第二图像中的图像位置；以及，将所述数码笔的笔尖在所述第二图像中的图像位置确定为所述数码笔在所述第二图像中的图像位置，并根据所述数码笔的图像位置与所述书写面的所述图像区域确定所述书写面与所述数码笔的第一相对位置；将所述第一相对位置转换为虚拟笔迹与虚拟的书写展示页面的第二相对位置；以及，基于所述第二相对位置在所述书写展示页面上输出所述虚拟笔迹。

5.根据权利要求4所述的系统，其特征在于，所述数码笔还包括：压力传感器，所述压力传感器用于检测所述数码笔的笔尖受到的压力；以及，所述光发射器，还用于在所述压力传感器检测到的压力超过压力阈值时发射不可见光。