[发明专利]一种网站分析系统及方法和装置

权利要求书

1.一种网站分析系统，包括防火墙、网络交换机和web服务器，其特征在于，所述网络交换机为具备镜像端口的网络交换机，所述镜像端口上连接有网站分析服务器；所述镜像端口用于通过流量镜像方式获取连接有所述网站分析服务器的通讯端口的通讯数据。

2.根据权利要求1所述的网站分析系统，其特征在于，所述网站分析服务器包括流量采集模块、http协议分析模块、Request报文分析模块、Response报文分析模块、访问信息收集模块和网站分析基础数据库；所述流量采集模块、所述http协议分析模块、所述Request报文分析模块、所述Response报文分析模块、所述访问信息收集模块和所述网站分析基础数据库顺序连接。

3.根据权利要求1所述的网站分析系统，其特征在于，所述网站分析系统还包括访问数据挖掘模块，所述访问数据挖掘模块用于根据请求端指定的分析条件对所述网站分析基础数据库中的数据进行筛选形成网站分析的报表并将所述网站分析的报表反馈给所述请求端。

4.一种应用权利要求1或2或3所述的网站分析系统进行数据采集和分析的方法，其特征在于，包括以下步骤：

S1，通过所述镜像端口获取所述web服务器收到和发出的全部数据包；

S2，分析所述数据包，从所述数据包中获取http协议数据包；

S3，分析所述http协议数据包中的Request报文数据，得到Request报文必要信息；

S4，分析所述http协议数据包中的Response报文数据，得到Response报文必要信息；

S5，将所述Request报文数据的所述Request报文必要信息，和与所述Request报文数据相对应的Response报文数据的Response报文必要信息组合在一起，形成访问网站的一次完整访问信息记录；

S6，将所述完整访问信息记录写入数据库和/或数据文件中；

S7，在预设时间段内循环执行S2-S6，从而形成网站分析基础数据；

S8，根据预设条件和指定格式对所述数据库和/或数据文件中所述网站分析基础数据进行分析归纳形成网站分析报表。 

5.根据权利要求4所述的方法，其特征在于，所述Request报文必要信息包括访问者的IP地址、访问的具体域名、访问的具体URL、Refrence信息和携带的Cookies；所述Response报文必要信息包括应答状态码、携带的内容类型和报文长度。

6.根据权利要求4或5所述的方法，其特征在于，

S1具体为，通过所述镜像端口获取，得到所有发送到所述web服务器以及从所述web服务器发出的报文，并将所述报文分离成上行和下行流量；和/或

S2具体为，通过对所述上行和下行流量中TCP载荷的内容分析区分，获取得到http协议报文；和/或

S3具体为，对所述http协议报文中的Request报文进行解码处理，分离出Request必要信息，并将所述Request必要信息缓冲；和/或

S4具体为，对所述http协议报文中的Response报文进行解码处理，分离出Response必要信息，并将所述Response必要信息缓冲；和/或

S5具体为，把包含有所述Request必要信息的Request报文缓存，并等待与该Request报文相对应的Response报文，当获取到与该Request报文对应的Response报文后，则将相互对应的Request报文中的Request必要信息和Response报文中的Response必要信息合并组合，形成访问网站的一次完整访问信息记录；和/或

S6具体为，将所述网站分析基础数据按照预设格式和规则，将一次完整的用户访问按照访问时间、访问者信息、访问的类型几个不同的维度分布存放在数据库和或数据文件中。