[发明专利]一种数据正则表达式的挖掘方法及装置有效
申请号: | 201310347701.8 | 申请日: | 2013-08-12 |
公开(公告)号: | CN103425771A | 公开(公告)日: | 2013-12-04 |
发明(设计)人: | 王明兴;贾西贝 | 申请(专利权)人: | 深圳市华傲数据技术有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 518057 广东省深圳市南山区高新区中*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 正则 表达式 挖掘 方法 装置 | ||
1.一种数据正则表达式的挖掘方法,其特征在于,所述方法包括以下步骤:
获取存储数据,并采用字典树结构存储;
根据正则表达式规则进行节点升级;
根据升级后节点的子节点个数和相同字符子节点数分别进行分支合并;
识别干扰分支,并进行分支删减;
将规则树转换成字符串格式并输出。
2.根据权利要求1所述的方法,其特征在于,所述采用字典树结构存储数据信息包括:节点字符、所有节点、字符重复次数、进入节点的数据条数及终止节点的数据条数。
3.根据权利要求1或2所述的方法,其特征在于,所述节点升级包括:
根据正则表达式规则预先制定包含字符级别和升级关系的规则表格;
根据所述规则表格进行节点升级。
4.根据权利要求1所述的方法,其特征在于,所述分支合并包括:
纵向合并和横向合并;
所述纵向合并仅当某个节点只有一个子节点,且该子节点的字符等同于父节点时进行;
所述横向合并当节点升级后某个父节点包含相同字符的子节点时进行。
5.根据权利要求1所述的方法,其特征在于,所述识别干扰分支包括:
预先设定一个阀值,阀值根据节点平均进入数和系数之乘积来确定;
如果某分支的进入记录数小于所述阀值,则判定为干扰分支。
6.根据权利要求1或5所述的方法,其特征在于,所述识别分支还包括:
如果某节点的终止记录数小于所述阀值,则判定为干扰点,应将所述节点的终止记录数设置为0。
7.一种数据正则表达式的挖掘装置,其特征在于,所述装置包括:
数据存储单元,用以采用字典树结构存储获取的数据信息;
节点升级单元,用以根据正则表达式规则进行节点升级;
分支合并单元,用以根据升级后节点的子节点个数和相同字符子节点数分别进行分支合并;
分支删减单元,用以将识别出的的干扰分支删除;
规则树输出单元,用以将规则树转换成字符串格式进行输出。
8.根据权利要求7所述的装置,其特征在于,所述数据存储单元包括:
数据存储单元存储数据信息包含节点字符、所有节点、字符重复次数、进入节点的数据条数及终止节点的数据条数。
9.根据权利要求7所述的装置,其特征在于,所述节点升级单元包括:
节点升级单元根据正则表达式规则预先制定包含字符级别和升级关系的规则表格,根据所述规则表格进行节点升级。
10.根据权利要求7所述的装置,其特征在于,所述分支合并单元包括:
所述分支合并单元仅当某个节点只有一个子节点,且该子节点的字符等同于父节点时进行纵向合并;
所述分支合并单元当节点升级后某个父节点包含相同字符的子节点时进行横向合并。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市华傲数据技术有限公司,未经深圳市华傲数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310347701.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:卧式谷物烘干机
- 下一篇:净水式循环养花草装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置