[发明专利]计算机执行的文本分析方法及装置有效
申请号: | 201910974127.6 | 申请日: | 2019-10-14 |
公开(公告)号: | CN110705251B | 公开(公告)日: | 2023-06-16 |
发明(设计)人: | 刘凡;施伟龙;张格皓 | 申请(专利权)人: | 支付宝(杭州)信息技术有限公司 |
主分类号: | G06F40/205 | 分类号: | G06F40/205;G06F16/33 |
代理公司: | 北京亿腾知识产权代理事务所(普通合伙) 11309 | 代理人: | 陈霁;周良玉 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 计算机 执行 文本 分析 方法 装置 | ||
1.一种计算机执行的文本分析方法,包括:
获取待分析的目标文本;
查询缓存中是否存在与所述目标文本匹配的匹配文本,其中所述缓存中至少在初始状态存储有多个历史文本和对应的多个文本标签,所述缓存基于最近最少使用LRU算法;
在不存在所述匹配文本的情况下,将所述目标文本输入文本分析模型中,得到针对所述目标文本的文本分析结果,所述文本分析模型基于所述多个历史文本和对应的多个文本标签而预先训练,所述文本分析模型为BERT模型;
判断所述目标文本是否符合预先设定的若干后置正则表达式;
在符合所述若干后置正则表达式中某个表达式的情况下,综合预先设定的对应于所述某个表达式的分析结果和所述文本分析结果,得到针对所述目标文本的综合分类结果;
将所述目标文本和所述综合分类结果关联存储至所述缓存中。
2.根据权利要求1所述的方法,其中,所述多个历史文本包括用户在社交平台或资讯平台中发布的文本,所述多个文本标签包括多个舆情标签;或者,
所述多个历史文本包括针对产品或服务的多条历史评论,所述多个文本标签对应多个满意度等级。
3.根据权利要求1所述的方法,其中,在所述查询缓存中是否存在与所述目标文本匹配的匹配文本之后,所述方法还包括:
在存在所述匹配文本的情况下,从所述缓存中获取与所述匹配文本关联的文本标签或分析结果,作为所述目标文本的文本分析结果。
4.根据权利要求1所述的方法,其中,所述在不存在所述匹配文本的情况下,将所述目标文本输入文本分析模型中,包括:
在不存在所述匹配文本情况下,判断所述目标文本是否符合预先设定的若干前置正则表达式;
在均不符合的情况下,将所述目标文本输入所述文本分析模型中;或者,
在符合所述若干前置正则表达式中某个表达式的情况下,将预先设定的对应于所述某个表达式的分析结果,作为所述目标文本的文本分析结果。
5.根据权利要求1所述的方法,其中,所述将所述目标文本输入文本分析模型中,包括:
在所述目标文本的字符数大于预定字符数的情况下,对所述目标文本的开头和结尾分别进行截取,并对截取的两部分字符进行拼接,得到具有所述预定字符数的拼接字符;
将所述拼接字符输入所述文本分析模型中。
6.根据权利要求1所述的方法,其中,所述将所述目标文本输入文本分析模型中,包括:
在所述目标文本的字符数小于预定字符数的情况下,对所述目标文本进行循环复制并且进行拼接,直到得到的第一拼接字符的字符数与所述预定字符数相差的字符数小于所述目标文本的字符数;
使用缺省字符填充所述相差的字符数,并与所述第一拼接字符进行拼接,得到具有所述预定字符数的第二拼接字符;
将所述第二拼接字符输入所述文本分析模型中。
7.根据权利要求1所述的方法,其中,所述将所述目标文本输入文本分析模型中,包括:
在所述目标文本的字符数小于预定字符数的情况下,对所述目标文本进行循环复制并且进行拼接,直到得到的第一拼接字符的字符数与所述预定字符数相差的字符数小于所述目标文本的字符数;
基于所述相差的字符数对所述目标文本进行截取,并且,使用所述截取得到的字符与所述第一拼接字符进行拼接,得到具有所述预定字符数的第二拼接字符;
将所述第二拼接字符输入所述文本分析模型中。
8.根据权利要求1所述的方法,其中,所述将所述目标文本和所述综合分类结果关联存储至所述缓存中,包括:
在所述缓存的容量已满的情况下,基于所述LRU算法,从所述缓存中的已存储数据中确定淘汰数据,并且,删除所述淘汰数据,以使所述缓存中的剩余容量足够存储所述目标文本和文本分析结果;
将所述目标文本和所述综合分类结果关联存储至所述缓存中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(杭州)信息技术有限公司,未经支付宝(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910974127.6/1.html,转载请声明来源钻瓜专利网。