|
钻瓜专利网为您找到相关结果 446262个,建议您 升级VIP下载更多相关专利
- [发明专利]一种动态网页爬虫系统-CN201710440709.7有效
-
刘少鹏;马震远;方浩生;林智勇;李俊
-
广东技术师范学院
-
2017-06-12
-
2021-02-19
-
G06F16/953
- 本发明提供了一种动态网页爬虫系统,包括爬虫引擎、调度器、解析模块、项目管道、下载器,所述解析模块包括脚本解析器、渲染器、切换模块,所述脚本解析器通过构建出动态网页的请求规则、解析动态网页中的所有文件并且提取动态网页的内容交给项目管道;所述渲染器通过加载动态网页的异步加载信息构建出完整的动态网页DOM树,并通过模拟操作,获取动态网页内容;所述切换模块检测脚本解析器或渲染器解析动态网页所花费的时间和解析出的内容是否完整,若所需时间超过阈值或内容不完整本发明提供的爬虫系统采用不同的爬取方法来爬取动态网页,爬取效率高,内存和网络网络资源占用低,具有自适应、智能化的特点。
- 一种动态网页爬虫系统
- [发明专利]记录介质、动态解析系统以及动态解析装置-CN202310072794.1在审
-
伊藤毅
-
柯尼卡美能达株式会社
-
2023-02-07
-
2023-08-15
-
G06T7/00
- 本发明的动态解析服务器(10)具备:保存部,保存对通过对被检者进行基于放射线的动态拍摄而得到的动态图像进行动态解析的动态解析算法;接收部,从第一数据收集装置(例如,A医院的数据收集服务器40)接收第一数据集,从第二数据收集装置(例如,B医院的数据收集服务器40)接收第二数据集,第一数据集包含对第一被检者进行动态拍摄而得到的第一动态图像、和通过对第一被检者的动态拍摄以外的第一检查而得到的信息,第二数据集包含对第二被检者进行动态拍摄而得到的第二动态图像、和通过对第二被检者的动态拍摄以外的第二检查而得到的信息;以及学习部,基于第一数据集和第二数据集,修正动态解析算法。
- 记录介质动态解析系统以及装置
- [发明专利]一种网页动态信息获取方法-CN201110087355.5有效
-
郑中华;周俊;高威;帅志虎
-
安徽博约信息科技有限责任公司
-
2011-04-07
-
2011-09-14
-
G06F17/30
- 本发明公开了一种网页动态信息获取方法,包括动态信息配置模板的配置,解析环境的搭建,动态资源的获取以及动态信息的组织输出四个步骤。其中动态信息配置模板记录着所要获取的动态信息以及相关的变量库及其赋值方法;解析环境的搭建则是根据网页HTML源码信息为动态信息配置模板中记录的变量库赋值;动态资源的获取是根据动态信息配置模板中记录的相关信息,调用已赋值变量库中的数据,得到动态信息的内容;动态信息的组织输出将所获取的动态资源,组织成格式化的字符串并输出。本发明避免了JS脚本信息的解析,仅从网页源码中获取少量关键数据,然后通过动态信息配置模板解析出所需获取的动态信息,针对性强,速度快,解析效率高。
- 一种网页动态信息获取方法
|