[发明专利]文本处理方法、装置和电子设备在审
| 申请号: | 202110603987.6 | 申请日: | 2021-05-31 |
| 公开(公告)号: | CN113360613A | 公开(公告)日: | 2021-09-07 |
| 发明(设计)人: | 蒋建光;时从斌 | 申请(专利权)人: | 维沃移动通信有限公司 |
| 主分类号: | G06F16/332 | 分类号: | G06F16/332;G06F40/216;G06F40/289;G06N3/04 |
| 代理公司: | 北京远志博慧知识产权代理事务所(普通合伙) 11680 | 代理人: | 李翠雅 |
| 地址: | 523863 广东*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 文本 处理 方法 装置 电子设备 | ||
1.一种文本处理方法,其特征在于,所述方法包括:
获取第一文本,所述第一文本包括M个第一字符,M为正整数;
根据每个第一字符的特征信息,确定所述每个第一字符的权重,任一第一字符的权重用于表征所述任一第一字符在所述第一文本中的重要程度;
从第二文本中删除目标字符,得到目标文本,所述第二文本为所述第一文本的全部或部分文本,所述目标字符为权重满足第一条件的第一字符。
2.根据权利要求1所述的方法,其特征在于,所述第一文本包括至少一个第一字符串,所述至少一个第一字符串包括所述M个第一字符,一个第一字符串包括至少一个第一字符;
在从第二文本中删除目标字符之前,所述方法还包括:
根据所述每个第一字符的权重,确定所述每个第一字符串的权重,任一第一字符串的权重用于表征所述任一第一字符串在所述第一文本中的重要程度;
从所述第一文本中删除目标字符串,得到所述第二文本,所述目标字符串为权重满足第二条件的第一字符串。
3.根据权利要求2所述的方法,其特征在于,所述根据所述每个第一字符的权重,确定所述每个第一字符串的权重,包括:
将每个第一字符串对应的每个第一字符的权重进行线性变换和函数变换,确定所述每个第一字符串的权重。
4.根据权利要求1至3任一项所述的方法,其特征在于,所述获取第一文本之前,所述方法还包括:
对待处理的第三文本执行分句处理,得到至少一个第二字符串;
对所述至少一个第二字符串中的每个第二字符串执行分词处理,得到至少一个第二字符;
获取所述至少一个第二字符中的每个第二字符的向量;
根据所述每个第二字符串对应的每个第二字符的向量,确定所述每个第二字符串的向量;
将所述每个第二字符串的向量进行线性变换和函数变换,确定所述每个第二字符串的权重,任一第二字符串的权重用于表征所述任一第二字符串在所述第三文本中的重要程度;
从所述第三文本中删除权重满足第三条件的第二字符串,得到所述第一文本。
5.根据权利要求1所述的方法,其特征在于,所述特征信息包括以下至少一项:文本信息,历史使用信息,上下文信息,语言概率信息。
6.一种文本处理装置,其特征在于,所述文本处理装置包括:获取模块、确定模块和执行模块;
所述获取模块,用于获取第一文本,所述第一文本包括M个第一字符,M为正整数;
所述确定模块,用于根据每个第一字符的特征信息,确定所述每个第一字符的权重,任一第一字符的权重用于表征所述任一第一字符在所述第一文本中的重要程度;
所述执行模块,用于从第二文本中删除目标字符,得到目标文本,所述第二文本为所述第一文本的全部或部分文本,所述目标字符为权重满足第一条件的第一字符。
7.根据权利要求6所述的文本处理装置,其特征在于,所述第一文本包括至少一个第一字符串,所述至少一个第一字符串包括所述M个第一字符,一个第一字符串包括至少一个第一字符;
所述确定模块,还用于根据所述每个第一字符的权重,确定所述每个第一字符串的权重,任一第一字符串的权重用于表征所述任一第一字符串在所述第一文本中的重要程度;
所述执行模块,还用于从所述第一文本中删除目标字符串,得到所述第二文本,所述目标字符串为权重满足第二条件的第一字符串。
8.根据权利要求7所述的文本处理装置,其特征在于,所述确定模块,具体用于将每个第一字符串对应的每个第一字符的权重进行线性变换和函数变换,确定所述每个第一字符串的权重。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于维沃移动通信有限公司,未经维沃移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110603987.6/1.html,转载请声明来源钻瓜专利网。





