[发明专利]一种面向暗网的数据采集与分析系统及方法在审
| 申请号： | 201910427963.2 | 申请日： | 2019-05-22 |
| 公开（公告）号： | CN110119469A | 公开（公告）日： | 2019-08-13 |
| 发明（设计）人： | 贾琼;陈志浩;常承伟;刘滋润;杨枭;许明龙 | 申请（专利权）人： | 北京计算机技术及应用研究所 |
| 主分类号： | G06F16/951 | 分类号： | G06F16/951;G06F16/955;G06F16/901;G06F16/903;G06F16/958 |
| 代理公司： | 中国兵器工业集团公司专利中心 11011 | 代理人： | 王雪芬 |
| 地址： | 100854*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明涉及一种面向暗网的数据采集与分析系统及方法，涉及信息安全技术领域。本发明在暗网数据采集方面通过在tor网络中部署探测节点，结合已有的爬虫接入、域名获取技术及方法，可获取更多有效暗网地址，通过暗网数据分析，将获取的暗网数据，进行关联性分析、热点分析等，从而解决了暗网原始数据格式不统一、数据内容杂乱的问题，并通过翻译平台解决了暗网中小语种多的问题。 | ||
| 搜索关键词： | 暗网 数据采集与分析 信息安全技术 原始数据格式 关联性分析 热点分析 数据采集 数据分析 数据内容 探测节点 域名获取 爬虫 语种 翻译 部署 网络 统一 | ||
【主权项】：
1.一种面向暗网的数据采集与分析系统，其特征在于，包括：数据采集模块：用于从公开数据爬取、暗网搜索引擎、Tor2Web地址以及Tor探测节点多个方面获取暗网域名；其中，针对暗网的数据采集，爬虫分为两类，一种在明网中，利用Tor浏览器或其他Tor代理进行爬取，第二种部署在Tor网络中，可直接进行爬取；数据处理模块：用于将数据采集模块获取的暗网原始数据进行处理，为数据存储及分析做预处理；数据存储模块：用于实现对数据采集模块得到的原始数据、数据处理模块得到的中间数据、结果数据的存储；原始数据包括爬虫采集到的非格式化数据、域名地址；中间数据包括格式化的数据；结果数据存储特征数据，索引数据包括数据处理过程中，对文本数据打的标签；数据分析模块：用于实现对数据存储模块中存储的数据的分析。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京计算机技术及应用研究所，未经北京计算机技术及应用研究所许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910427963.2/，转载请声明来源钻瓜专利网。
