[发明专利]一种基于Subword词表的能源数据清洗方法及装置在审
申请号: | 202310134265.X | 申请日: | 2023-02-17 |
公开(公告)号: | CN116108126A | 公开(公告)日: | 2023-05-12 |
发明(设计)人: | 彭勃;左婧;龚贤夫;李耀东;李作红;张姣;李欣洋;谢敏 | 申请(专利权)人: | 广东电网有限责任公司 |
主分类号: | G06F16/30 | 分类号: | G06F16/30;G06F40/237;G06N3/08;G06N3/084;G06N3/0499 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 吴松滨 |
地址: | 510000 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于Subword词表的能源数据清洗方法及装置,所述方法包括:在获取能源数据后,利用预设的Subwrod词表将所述能源数据的每个文本转换成第一文本嵌入矩阵,所述Subwrod词表是字符粒度级别的文本列表;将所述第一文本嵌入矩阵转换成符合模型输入格式的综合矩阵;将所述综合矩阵输入至预设的神经网络模型进行清洗处理,得到清洗数据。本发明可以利用字符粒度级别的Subwrod词表从能源数据中提取句子和序号并将其转换成模型的输入矩阵,再将输入矩阵输入至模型进行清洗处理得到清洗后的数据,由于Subwrod词表是字符粒度级别,不但规模小而且转换处理不会损失数据的信息量,进而能节省后续清洗计算的数据量,以缩短计算的处理耗时,提升清洗数据的处理效率。 | ||
搜索关键词: | 一种 基于 subword 词表 能源 数据 清洗 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东电网有限责任公司,未经广东电网有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202310134265.X/,转载请声明来源钻瓜专利网。