[发明专利]骚扰数据批量处理方法及装置

说明书

本发明公开了一种骚扰数据批量处理方法，用于对初步标记为骚扰电话或垃圾短信的多个数据进行批量处理，针对不同数据源批量数据(垃圾短信和电话)录入系统时，通过将相同数据标识(例如电话号码的key)的数据由同一个进程来处理，由此保证高并发性并且保证数据一致性。

技术领域

本发明涉及通信技术领域，具体涉及一种骚扰数据批量处理方法及装置。

背景技术

随着通信技术的发展，手机等通信终端变得越来越普及，对人们的学习工作生活等方面都产生不可忽略的影响。然而，一些不法分子正是利用手机的普及牟取私利。目前，存在很多利用自动机器或通过人工恶意拨打电话、发送骚扰短信，给用户生活带来诸多骚扰，甚至带来财产等方面的损失。目前手机等终端上可安装防骚扰电话或短信的安全软件，当有骚扰电话接入时客对用户进行“该号码可能是骚扰电话”等提醒。当用户发现某个号码可能是骚扰电话时，也可举报该号码。在安全软件的后台服务器侧，每时每刻会收到不同数据源(不同运营方、第三方平台等)提交的批量数据处理请求，请求对疑似骚扰号码的数据进行识别。如何在后台服务器对不同数据源提交的批量数据进行有效录入及分析，是本领域技术人员需要解决的一个技术问题。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的骚扰数据批量处理方法及装置。

依据本发明的一个方面，提供一种骚扰数据批量处理方法，用于对初步标记为骚扰电话或垃圾短信的多个数据进行批量处理，包括：

从不同数据源接收到多个数据处理请求；

根据所述多个数据处理请求，获取到多个待处理的数据，并计算出各个待处理的数据的数据标识；

按照数据标识将数据划分为多批数据，设置不同的数据处理进程分别对各个数据标识对应的各批数据进行处理。

在一种可选方式中，所述设置不同的数据传输队列分别对各个数据标识对应的各批数据进行处理，包括：

将具有相同数据标识的数据依次存入同一个数据传输队列中，将具有不同数据标识的数据存入不同的数据传输队列中；

为各个数据传输队列设置对应的数据处理进程，用于处理对应的数据传输队列中的数据；

其中，各个数据处理进程并行运行。

在一种可选方式中，还包括：

对所述数据传输队列进行流量监控；

当所述数据传输队列中的数据量超过最大数据阈值或者数据出入队列速度低于最低速度阈值时，生成告警信息。

在一种可选方式中，还包括：

为各个数据处理进程设置备份进程，当所述数据处理进程处理失败时，启动所述备份进程对数据进行处理。

在一种可选方式中，还包括：

获取所述数据处理进程或备份进程处理后的数据；

将所述处理后的数据以压缩二进制形式存入第一分析系统，由所述第一分析系统对数据进行线上分析；和/或，

将所述处理后的数据以明文形式存入第二分析系统，由所述第二分析系统对数据进行线下分析。

在一种可选方式中，所述计算出各个待处理的数据的数据标识包括：

解析所述数据得到骚扰电话或垃圾短信所属的电话号码；

根据所属的电话号码进行关键字计算，得到所述数据标识。

在一种可选方式中，所述根据所述多个数据处理请求，获取到多个待处理的数据，包括：