[发明专利]一种互联网资源的下载方法及系统

权利要求书

1.一种互联网资源的下载方法，其特征在于，包括，

解析模块向下载模块请求一个资源下载任务和该资源的描述信息；

解析模块调度模拟人工浏览器模块模拟人工浏览网页，同时加载截包模块获取资源请求信息，并将截包模块获取的资源请求信息发送给下载模块；

下载模块根据解析模块提供的资源请求信息下载该资源。

2.根据权利要求1所述的下载方法，其特征在于，在解析模块向下载模块请求一个资源下载任务和该资源的描述信息之前，还包括，

下载模块向数据库请求一批资源下载任务和该资源的描述信息。

3.根据权利要求1所述的下载方法，其特征在于，在下载模块根据解析模块提供的资源请求信息下载该资源后，还包括，  

将下载模块下载好的资源存储至数据库。

4.根据权利要求1至3任一所述的下载方法，其特征在于，所述资源包括视频、音频和歌词；所述资源的描述信息包括音频的播放页URL、视频的播放页URL、歌词的浏览页URL、资源类型、是否鼠标点击、浏览器类型；所述资源类型包括音频、视频、歌词；所述浏览器类型包括IE浏览器、chrom浏览器；所述资源请求信息包括资源的http请求头、URL和资源任务id。

5.根据权利要求1至3任一所述的下载方法，其特征在于，所述解析模块调度模拟人工浏览器模块模拟人工浏览网页，同时加载截包模块获取资源请求信息，具体包括，

初始化模拟人工浏览器模块；

建立用户数据报协议udp服务与截包模块通讯；

解析模块根据资源的描述信息中浏览器类型确定模拟人工浏览器模块的模拟方式和截包模块的加载方式；

模拟人工浏览器模块模拟人工浏览音频的播放页URL、视频的播放页URL、歌词的浏览页URL，同时，解析模块加载截包模块获取资源请求信息。

6.根据权利要求5所述的下载方法，其特征在于，所述解析模块根据资源的描述信息中浏览器类型确定模拟人工浏览器模块的模拟方式和截包模块的加载方式具体包括，

 若资源的描述信息中浏览器类型为IE浏览器，解析模块确定模拟人工浏览器模块的模拟方式为IE模拟方式，即模拟人工浏览IE浏览器，同时利用微软Detour组件把截包模块注入模拟人工浏览器模块；

若资源的描述信息中浏览器类型为chrom浏览器，解析模块确定模拟人工浏览器模块的模拟方式为chrom模拟方式。

7.根据权利要求5所述的下载方法，其特征在于，所述截包模块获取资源请求信息具体包括，

截获每一个http请求头，并记录http请求头、URL和socketID；如果URL中包含.wma或.MP3，则将该http请求头和URL作为默认的资源请求信息；

截获每一个http响应头，若响应头的内容在Content-Type后包含音频标志或视频标志，则将该socketID对应的http请求头和URL作为所需的资源请求信息；否则，如果存在默认的资源请求信息，将默认的资源请求信息作为所需的资源请求信息；否则，截包模块获取资源请求信息失败。   

8.一种互联网资源的下载系统，其特征在于，包括，

下载模块，用于向数据库请求一批资源下载任务和该资源的描述信息，以及根据解析模块提供的资源请求信息下载该资源；

解析模块，用于向下载模块请求一个资源下载任务和该资源的描述信息，以及调度模拟人工浏览器模块模拟人工浏览网页，同时加载截包模块获取资源请求信息，并将截包模块获取的资源请求信息发送给下载模块；

模拟人工浏览器模块，用于模拟人工浏览网页；

截包模块，用于获取资源请求信息，以及将获取的资源请求信息发送给解析模块。

9.根据权利要求8所述的下载系统，其特征在于，还包括，

数据库，用于存储下载模块下载好的资源。