[发明专利]数据过滤的方法和装置

权利要求书

1.一种数据过滤的方法，其特征在于，过滤规则由一个到多个标识以及对应于每个标识的筛选条件来表达，所述标识包括原始数据的至少一个列，所述方法包括：

从原始数据中提取所述过滤规则涉及的所有标识指定的列，得到源数据；其中，所述原始数据具有不同数据结构，所述标识指定的列包括同一个标识指定的匹配于所述不同数据结构的列；

根据过滤规则的表达，依次采用各个标识对应的筛选条件对源数据的行记录进行过滤，得到目标数据。

2.根据权利要求1所述的方法，其特征在于，所述过滤规则涉及的所有标识为N个并且每个标识在表达过滤规则时只使用一次，N为自然数；

所述根据过滤规则的表达，依次采用各个标识对应的筛选条件对源数据的行记录进行过滤，得到目标数据，包括：将源数据作为标识1的待处理数据，根据待处理数据的每行记录中标识1指定列的值、与标识1对应的筛选条件确定所述行记录是否通过标识1的筛选，按照是否通过的结果和过滤规则将所述行记录或者作为目标数据、或者作为已处理数据、或者被丢弃；将上一个标识的已处理数据作为下一个标识的待处理数据，采用下一个标识重复上述筛选过程；直到经过标识N的筛选后，得到目标数据。

3.根据权利要求2所述的方法，其特征在于，所述过滤规则包括：通过第一标识的筛选、并且通过第二标识的筛选；

所述根据过滤规则，依次采用各个标识对应的筛选条件对源数据的行记录进行过滤，得到目标数据，包括：将第一标识的待处理数据中通过第一标识筛选的行记录保存为已处理数据；将第一标识的已处理数据作为第二标识的待处理数据，将通过第二标识筛选的行记录保存为目标数据。

4.根据权利要求2所述的方法，其特征在于，所述过滤规则包括：通过第三标识的筛选、或者通过第四标识的筛选；

所述根据过滤规则，依次采用每个标识对应的筛选条件对源数据的行记录进行过滤，得到目标数据，包括：将第三标识的待处理数据中通过第三标识筛选的行记录保存为目标数据，将未通过第三标识筛选的行记录保存为第三标识的已处理数据；将第三标识的已处理数据作为第四标识的待处理数据，将通过第四标识筛选的行记录保存为目标数据。

5.根据权利要求2所述的方法，其特征在于，所述过滤规则还包括：过滤方向；当过滤方向为正向时，如果某个行记录中标识指定列的值满足所述标识对应的筛选条件，则所述行记录通过所述标识的筛选；当过滤方向为反向时，如果某个行记录中标识指定列的值不满足所述标识对应的筛选条件，则所述行记录通过所述标识的筛选。

6.根据权利要求1所述的方法，其特征在于，所述过滤规则由至少一个标签来表达；所述标签用来描述具备一定特征的业务，包括一个以上标识和对应于每个标识的筛选条件，每个标识的至少一个指定列与所述特征相关；

所述根据过滤规则，依次采用每个标识对应的筛选条件对源数据的行记录进行过滤，得到目标数据，包括：对每个标识，在标识所属的标签中查找标识对应的筛选条件，按照所述筛选条件对源数据的行记录进行过滤；在根据过滤规则遍历所有标识后得到目标数据。

7.根据权利要求6所述的方法，其特征在于，所述过滤规则由至少一个标签和/或至少一个标签组合来表达，所述标签组合包括至少两个标签；

所述根据过滤规则，依次采用每个标识对应的筛选条件对源数据的行记录进行过滤，得到目标数据，包括：对每个标识，在标识所属的标签或标签组合中查找标识对应的筛选条件，按照所述筛选条件对源数据的行记录进行过滤；在根据过滤规则遍历所有标识后得到目标数据。

8.一种数据过滤的装置，其特征在于，过滤规则由一个到多个标识以及对应于每个标识的筛选条件来表达，所述标识包括原始数据的至少一个列，所述装置包括：

源数据提取单元，用于从原始数据中提取所述过滤规则涉及的所有标识指定的列，得到源数据；其中，所述原始数据具有不同数据结构，所述标识指定的列包括同一个标识指定的匹配于所述不同数据结构的列；

源数据过滤单元，用于根据过滤规则的表达，依次采用各个标识对应的筛选条件对源数据的行记录进行过滤，得到目标数据。