[发明专利]基于爬虫技术的CMS页面生成方法

说明书

本发明涉及基于爬虫技术的CMS页面生成方法，包括以下步骤：步骤S1.开发人员定制主站页面爬虫工具，识别主站所有的CMS页面，生成约定好的数据格式；步骤S2.运营人员将爬虫工具获取到的主站页面数据通过数据转换接口转换成分站数据，分站提供基于固定格式数据的页面生成接口，解析数据转换成分站可识别的数据格式，分站根据转换后的数据生成页面；步骤S3.分站同时提供页面的多版本预览发布管理接口，运营人员根据需求人工再修改；步骤S4.预览、发布页面，页面上线。其优点表现在：运营人员不再受制作内容的大小以及制作时间的局限，可以基于时间提前发布，不需要按时蹲守发布，大大减少运营人员工作压力以及人力资源成本。

技术领域

本发明涉及互联网技术领域，具体地说，是基于爬虫技术的CMS页面生成方法。

背景技术

随着互联网的不断发展以及全球化趋势的愈见突现，网上商城的国际化逐渐被各大品牌公司所关注，“国际站”的概念逐渐被提出。国际站往往并非简单的独站多语言的形式，而是多站多内容的建立模式，每个站通常有自己独立的网站内容，以达到本土化的目的。

这种一个主站多个分站的模式已渐渐被各大品牌所采用，然而在日常网站内容更迭的过程中，很难做到分站与主站内容及时同步。主站更新时，往往都是通过网站运营人员手工制作的形式上线分站内容，该过程由于耗时耗力，且不可避免人为因素的影响。

中国专利文献CN201110409441.3，申请日20111209，专利名称为：一种 CMS内容订单系统及实现方法，该方法包括：通过CMS门户生成内容订单，内容订单用于指示向目标业务系统发布适合目标业务系统格式要求的内容；依据所述内容订单判断是否存在符合目标业务系统格式要求的子内容，若存在则直接生成内容发布任务，若不存在则自动生成转码任务，在转码任务成功完成后自动生成对应的内容发布任务；内容发布任务用于自动将所述内容订单指定的内容发布到目标业务系统；转码任务用于自动执行文件格式转码，生成符合目标业务系统格式要求的子内容。

上述专利文献通过创建内容订单，通过业务流程控制，自动实现目标业务系统所要求子内容格式的转码以及对应内容的发布，实现针对目标业务系统的内容自动下发，提高了发布效率，满足业务系统运营需求。但是，关于一种运营人员可以在主站内容更新时，更加高效、快速的制作分站内容，并加以预览、发布上线，以提高效率，减少人力成本的技术方案则无相应的公开。

综上所述，现有技术中，运营人员在国际主站内容发生更新时，均通过人工制作的形式来生成分站新内容，耗费人力以及时间，容易被人为因素影响，需要一种运营人员可以在主站内容更新时，更加高效、快速的制作分站内容，并加以预览、发布上线，以提高效率，减少人力成本的基于爬虫技术的CMS页面生成方法，而关于这种方法目前还未见报道。

发明内容

本发明的目的是针对现有技术中的不足，提供一种运营人员可以在主站内容更新时，更加高效、快速的制作分站内容，并加以预览、发布上线，以提高效率，减少人力成本的于爬虫技术的CMS页面生成方法。

为实现上述目的，本发明采取的技术方案是：

基于爬虫技术的CMS页面生成方法，其特征在于，所述方法包括以下步骤：

步骤S1.开发人员定制主站页面爬虫工具，识别主站所有的CMS页面，生成约定好的数据格式；

步骤S2.运营人员将爬虫工具获取到的主站页面数据通过数据转换接口转换成分站数据，分站提供基于固定格式数据的页面生成接口，解析数据转换成分站可识别的数据格式，分站根据转换后的数据生成页面；

步骤S3.分站同时提供页面的多版本预览发布管理接口，运营人员根据需求人工再修改；

步骤S4.预览、发布页面，页面上线。