[发明专利]食品安全数据挖掘方法有效
申请号: | 202110498434.9 | 申请日: | 2021-05-08 |
公开(公告)号: | CN113378576B | 公开(公告)日: | 2023-05-26 |
发明(设计)人: | 陈胜;张华东;李北川;罗书全;杨斌;邓迅;詹洪胜;霍娇;莫军;高中华;谭敏 | 申请(专利权)人: | 重庆航天信息有限公司;重庆市疾病预防控制中心 |
主分类号: | G06F40/30 | 分类号: | G06F40/30;G06F40/295;G06N3/0442 |
代理公司: | 北京海虹嘉诚知识产权代理有限公司 11129 | 代理人: | 胡博文 |
地址: | 400039 重庆市九*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 食品安全 数据 挖掘 方法 | ||
本发明提供的一种食品安全数据挖掘方法,包括以下步骤:S1.采集网络文本,并对网络文本进行预处理;S2.从预处理后的网络文本中提取出食品特征词、情感词、程度词和否定词;S3.确定情感词的情感值,并形成情感值对照表;构建程度词权重表和否定词权重表;S4.判断预处理后的网络文本中的评论句句型,包括转折句、递进句和条件句,并根据评论句之间的关系确定出权重调节系数;S5.基于步骤S3步骤S4中的参数,计算预处理后的网络文本的情感倾向值,将情感倾向值大于设定阈值的评论句记录到正向评价集合中,将情感倾向值小于设定阈值的评论句记录到负向评价集合中,通过上述方法,能够从网络文本中挖掘出准确的具有倾向性的评语数据,从而能够准确把握食品安全的舆情信息,从而能够为食品监督、监管提供准确的数据支持。
技术领域
本发明涉及一种数据挖掘方法,尤其涉及一种食品安全数据挖掘方法。
背景技术
食品安全是现代社会中极为重要的话题,而且,由于网络技术的发展,人们在日常生活中对食品安全在网络上进行相应的意见评述,这些评述中往往具有正面的,负面的亦或是中性的评述,现有技术中,关于食品的网络评述文本中的有效数据进行准确挖掘是一个系带解决的技术难题。
发明内容
有鉴于此,本发明的目的是提供一种食品安全数据挖掘方法,能够从网络文本中挖掘出准确的具有倾向性的评语数据,从而能够为食品监督、监管提供准确的数据支持。
本发明提供的一种食品安全数据挖掘方法,包括以下步骤:
S1.采集网络文本,并对网络文本进行预处理;
S2.从预处理后的网络文本中提取出食品特征词、情感词、程度词和否定词;
S3.确定情感词的情感值,并形成情感值对照表;构建程度词权重表和否定词权重表;
S4.判断预处理后的网络文本中的评论句句型,包括转折句、递进句和条件句,并根据评论句之间的关系确定出权重调节系数;
S5.基于步骤S3步骤S4中的参数,计算预处理后的网络文本的情感倾向值,将情感倾向值大于设定阈值的评论句记录到正向评价集合中,将情感倾向值小于设定阈值的评论句记录到负向评价集合中。
进一步,步骤S1中,对于网络文本的预处理包括:
S11.对网络文本进行有序化处理,并剔除网络文本中的停用词、无关词;
S12.对步骤S1中处理后的网络文本进行指代消解:
S121.基于fasttext分类模型对网络文本进行指代词检测;
S122.基于BiLSTM_CRF深度学习模型进行网络文本中的实体词进行提取;
S123.将网络文本的指代词替换成相对应的实体词。
进一步,步骤S5中,根据如下模型计算网络文本的情感倾向值S:
S=S1+S2+S3,其中,S1为网络文本中一般陈述句的情感倾向值,S2为网络文本中转折句的情感倾向值,S3为条件句的情感倾向值。
进一步,一般陈述句的情感倾向值通过如下方法计算:
其中,wdeg为第i个陈述句中的程度词的权重,Se为第i个陈述句中的情感特征词的情感值,wneg为第i个陈述句中的否定词的平均权重,Q为网络文本中一般陈述句的个数,m为陈述句中否定词的个数。
进一步,转折句的情感倾向值通过如下方法计算:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆航天信息有限公司;重庆市疾病预防控制中心,未经重庆航天信息有限公司;重庆市疾病预防控制中心许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110498434.9/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置