“流式数据”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果2505069个，建议您升级VIP下载更多相关专利

[发明专利]流式数据处理方法、装置、设备及存储介质-CN202310673453.X在审
发明人：滕海燕;温源;姜辉;乔新亚;石权;郑子初;赵健 -专利权人：中国联合网络通信集团有限公司;联通数字科技有限公司;联通云数据有限公司
申请日： 2023-06-07 - 公布日： 2023-09-08 - 主分类号： G06F16/2455 文献下载
摘要：本申请提供一种流式数据处理方法、装置、设备及存储介质。该方法包括：接收流式处理平台发送的流式数据、流式数据的标签、以及流式数据的时间信息；根据流式数据的标签，从历史流式数据库中确定历史流式数据表；根据历史时间信息和时间信息，将历史流式数据表中的目标历史流式数据更新为流式数据，得到更新历史流式数据表；确定更新历史流式数据表中流式数据的第一数据量和历史流式数据的第二数据量；根据流式数据的标签，确定与标签对应的数据处理规则；根据数据处理规则、更新历史流式数据表中的流式数据和历史流式数据本申请的方法，提高了对流式数据进行处理的效果。
数据处理方法装置设备存储介质

[发明专利]多场景流式数据处理方法、系统、网络设备和存储介质-CN202210708889.3有效
发明人：王俊月;刘鑫;李盟 -专利权人：云账户技术（天津）有限公司
申请日： 2022-06-22 - 公布日： 2022-09-02 - 主分类号： G06F16/2453 文献下载
摘要：本申请提供一种多场景流式数据处理方法、系统、网络设备和存储介质，属于计算机技术领域。本申请实施例提供的多场景流式数据处理方法，包括获取目标应用的原始流式数据；根据场景类型，从所述原始流式数据中提取所述场景类型对应的流式数据；获取所述场景类型对应的数据处理规则，所述数据处理规则用于确定成对的流式数据；根据所述数据处理规则，获取所述场景类型对应的流式数据中的成对的流式数据；将获取到的成对的流式数据存储至数据库；通过上述方法实现了对目标应用在多场景下的流式数据获取，并按各个场景的数据处理规则获取承兑的流式数据后，将所有成对的流式数据存入同一数据库中，实现了支持多场景流式数据的处理。
场景数据处理方法系统网络设备存储介质

[发明专利]多数据流处理方法、装置、计算机设备和存储介质-CN202010825699.0有效
发明人：吴金迎;杨大为;郭瑞敏;钱津津;司孝波 -专利权人：苏宁云计算有限公司
申请日： 2020-08-17 - 公布日： 2022-11-15 - 主分类号： G06F16/22 文献下载
摘要：本申请涉及一种多数据流处理方法、装置、计算机设备和存储介质。所述方法包括：持续接收来自流处理平台的第一流式数据和第二流式数据；接收到对应有第二流式数据的第一流式数据后，若确定与其对应的第二流式数据已全接收到，对第一流式数据及其对应的第二流式数据进行关联处理，在关联处理后得到的关联数据满足预设条件时，将第一流式数据存入数据库；接收到第二流式数据后，若确定与其对应的目标第一流式数据已接收到，且与目标第一流式数据对应的第二流式数据已全接收到，对目标第一流式数据及其对应的第二流式数据进行关联处理，在关联处理后得到的关联数据满足预设条件时，将目标第一流式数据存入数据库，能更实时地处理多实时数据流。
多数处理方法装置计算机设备存储介质

[发明专利]一种流式数据存储方法、读取方法、设备及可读存储介质-CN202011126421.0有效
发明人：罗心;江文龙 -专利权人：浙江大华技术股份有限公司
申请日： 2020-10-20 - 公布日： 2021-02-19 - 主分类号： G06F16/13 文献下载
摘要：本申请公开了一种流式数据存储方法、读取方法、设备及可读存储介质，该流式数据存储方法包括：创建一个连续流式数据文件，其中，连续流式数据文件至少包括若干数据帧；当连续流式数据文件关闭并重新打开时，在连续流式数据文件后面创建空洞信息帧，其中，空洞信息帧记录连续流式数据文件的文件信息偏移地址；在创建空洞信息帧后，继续写入数据帧，形成另一个连续流式数据文件；将连续的连续流式数据文件组成一个流式数据存储文件。上述方案，能够将大量连续流式数据文件汇聚成一个流式数据存储文件，达到减少文件总数的目的。
一种数据存储方法读取设备可读介质

[发明专利]一种多源流式大数据融合汇聚处理框架模型实现方法-CN201911395133.2有效
发明人：俞鹏飞;冯磊;李芝权;杨永刚 -专利权人：电信科学技术第五研究所有限公司
申请日： 2019-12-30 - 公布日： 2023-05-26 - 主分类号： G06F16/25 文献下载
摘要：本发明公开了一种多源流式大数据融合汇聚处理框架模型实现方法，包括：多源流式数据采集实现方法包括：流式数据采集代理和多源流式数据采集服务，提供汇聚元数据标准，进行流式多源数据采集；多源流式数据融合处理实现方法包括：多源流式数据融合汇聚，提供基于FlinkSpark Stream流式处理引擎，依据汇聚元数据标准，配置采集的流式多源数据融合进行流式数据处理，加工为符合汇聚元数据标准要求的汇聚元数据，进行规整化汇聚元数据标准存储，为汇聚数据统计挖掘分析提供数据。本发明融合大数据处理主流Flink、Sprakstream开源技术组件，解决多源数据融合汇聚处理中的多源数据互补、特征算子化加工、汇聚元数据标准化、流式目标数据匹配。
一种源流数据融合汇聚处理框架模型实现方法

[发明专利]流式数据处理方法、规则插件、流式数据处理模块及系统-CN202111405082.4在审
发明人：董一博 -专利权人：青岛海尔科技有限公司;海尔智家股份有限公司
申请日： 2021-11-24 - 公布日： 2022-04-01 - 主分类号： G06F16/2455 文献下载
摘要：本发明提供一种流式数据处理方法、规则插件、流式数据处理模块及系统，该方法包括：响应于流式数据处理模块的触发，获取待处理流式数据对应的原始业务规则；基于待处理流式数据的数据源类型，对原始业务规则进行解析，获取与待处理流式数据的数据源类型匹配的目标业务规则，以使得流式数据处理模块基于目标业务规则，对待处理流式数据进行处理。本发明提供的流式数据处理方法、规则插件、流式数据处理模块及系统，能基于与流式数据处理模块无缝集成的规则插件，在进行流式数据处理时实现不同语言的业务规则的动态加载，能实现远程调用或跨平台调用业务规则，能更灵活、更高效和更简单的实现业务规则的动态加载，能提高海量流式数据的处理效率。
数据处理方法规则插件模块系统

[发明专利]用于分配流式数据的方法及装置-CN201910435829.7有效
发明人：吕赛霞;翟毅腾;马鸣;欧阳威;周扬;吴彦伦 -专利权人：创新先进技术有限公司
申请日： 2019-05-23 - 公布日： 2023-02-28 - 主分类号： G06F9/50 文献下载
摘要：本公开提供用于分配流式数据的方法及装置。该方法包括：获取各个流式数据处理资源的当前健康度、在前健康度和当前成功量；针对各个流式数据处理资源，基于该流式数据处理资源的当前健康度和在前健康度，确定该流式数据处理资源的当前负载预期变化量；基于各个流式数据处理资源的当前成功量以及当前负载预期变化量，确定所述各个流式数据处理资源的当前负载预期量；基于所述各个流式数据处理资源的当前负载预期量，确定各个流式数据处理资源的第一数据分配概率；以及根据所述第一数据分配概率将所述流式数据分配给所述各个流式数据处理资源中的对应流式数据处理资源
用于分配数据方法装置

[发明专利]流式数据存储方法及装置-CN202010781565.3在审
发明人：朱阿龙;田林;石慧彪;王博瑞 -专利权人：中国银行股份有限公司
申请日： 2020-08-06 - 公布日： 2020-10-30 - 主分类号： G06F16/22 文献下载
摘要：本发明公开了一种流式数据存储方法及装置，该流式数据存储方法包括：获取Hive数据库表的分区信息；接收流式数据处理引擎传入的流式数据；判断Hive数据库表的分区信息是否包含接收到的流式数据的分区信息；在Hive数据库表的分区信息不包含接收到的流式数据的分区信息时，创建新的Hive分区；将接收到的流式数据存储至新的Hive分区对应的HDFS文件中。本发明在Hive数据库表的分区信息不包含接收到的流式数据的分区信息时，通过创建新的Hive分区，将接收到的流式数据存储至新的Hive分区对应的HDFS文件中，能够提高流式数据存储的稳定性，同时保障流式数据的实时性
数据存储方法装置

[发明专利]车载网络流式数据优化方法及装置-CN201910762043.6在审
发明人：周鹏;卫福兴;庞仙平 -专利权人：北京伏羲车联信息科技有限公司
申请日： 2019-08-16 - 公布日： 2019-11-05 - 主分类号： H04L12/851 文献下载
摘要：本发明提供了一种车载网络流式数据优化方法及装置，涉及车载数据传输技术领域，方法包括：获取数据发送请求，根据数据发送请求确定所需传输的流式数据，并确定所需传输的流式数据的数据优先级，数据优先级为按带宽、实时性和重要程度对流式数据所划分级别；确定当前网络质量等级；根据当前网络质量等级和数据优先级对应关系从所需传输的流式数据中确定最终传输的流式数据及流式数据传输顺序，并根据当前网络质量等级及流式数据传输顺序对相应级别的最终传输的流式数据进行数据压缩和优化；按照流式数据传输顺序对数据压缩和优化后的最终传输的流式数据进行数据传输；本发明能够在有限的带宽下合理分配多种应用数据，从而保障网络应用体验。
流式数据传输传输顺序车载网络数据压缩优化带宽传输技术领域数据发送请求对流式数据保障网络车载数据发送请求获取数据数据传输应用数据网络实时性分配应用

[发明专利]流式数据的处理方法、装置及系统-CN202211223234.3在审
发明人：刘洋;张国彪;王萌;王洪昆;边志宏;王蒙;丁颖;焦杨;马瑞峰;徐建喜 -专利权人：国能铁路装备有限责任公司
申请日： 2022-10-08 - 公布日： 2023-03-07 - 主分类号： G06F16/22 文献下载
摘要：本发明涉及数据处理领域，提供一种流式数据的处理方法、装置及系统，方法包括：接收数据平台上传的流式数据；对流式数据中的关键信息进行识别，并基于预设的关联关系确定流式数据对应的处理算法；其中，关联关系用于表征流式数据中的关键信息与处理算法的对应关系；通过处理算法确定流式数据中的有效数据，并对有效数据进行存储。由于在流式数据的数据处理过程中，可以通过处理算法对流式数据做分析处理，且仅对有效数据进行存储，相比于现有的流式数据处理方式，数据处理功能更加完善，且数据处理效率更高，解决了现有的流式数据处理过程不具备数据分析功能、数据处理效率低的问题。
数据处理方法装置系统

[发明专利]一种乱序流式数据的降频方法、装置、设备及存储介质-CN202211278526.7在审
发明人：臧大昕;王浩强;司红燕;程臻;谢葳;刘中林 -专利权人：中车信息技术有限公司
申请日： 2022-10-19 - 公布日： 2023-01-31 - 主分类号： G06F16/2458 文献下载
摘要：本申请实施例提供了一种乱序流式数据的降频方法、装置、设备及存储介质，其包括：获取乱序流式数据，并通过对所述乱序流式数据进行解析，获取所述乱序流式数据的时间序列值；根据所述乱序流式数据的时间序列值和预置的数据降频频率，计算所述乱序流式数据降频后的时间序列值；利用所述降频后的时间序列值对所述乱序流式数据进行数据降频处理，得到降频后的乱序流式数据。
一种乱序流式数据方法装置设备存储介质

[发明专利]检查点时间间隔的调整方法、装置、电子设备及存储介质-CN202310218589.1在审
发明人：韩旭东;刘勇成;胡志鹏;袁思思;程龙 -专利权人：网易(杭州)网络有限公司
申请日： 2023-03-07 - 公布日： 2023-06-09 - 主分类号： A63F13/35 文献下载
摘要：本申请提供了一种检查点时间间隔的调整方法、装置、电子设备及存储介质，该方法包括：在流式处理框架处理流式数据的过程中，通过流式处理框架的检查点将检查点时间间隔内的流式数据写入文件系统中，更新检查点时间间隔内流式数据的数据状态为可读取状态，根据写入文件系统中的流式数据的数据量，确定流式数据的数据量变化趋势，根据流式数据的数据量变化趋势对检查点时间间隔进行调整，控制检查点将调整后的检查点时间间隔内的流式数据写入文件系统中，更新调整后的检查点时间间隔内流式数据的数据状态为可读取状态本申请能够使下游数据读取应用更快速的使用到流式数据中的部分数据，加强了下游数据读取应用使用流式数据中部分数据的及时性。
检查点时间间隔调整方法装置电子设备存储介质

[发明专利]流式数据的处理方法、装置、电子设备、存储介质-CN202211202599.8在审
发明人：潘能超 -专利权人：北京百度网讯科技有限公司
申请日： 2022-09-28 - 公布日： 2023-03-14 - 主分类号： H04L65/60 文献下载
摘要：本公开提供了流式数据的处理方法、装置、电子设备、存储介质，涉及数据处理领域，尤其涉及流式数据处理领域。具体实现方案为：将根据所述流式数据得到的第一流式数据输入流计算算子，根据所述流计算算子确定所述第一流式数据中采样时刻为目标时刻的数据帧的第一结果；将根据所述流式数据得到的第二流式数据输入映射算子，根据所述映射算子确定所述第二流式数据中采样时刻为所述目标时刻的数据帧的第二结果；根据所述第一结果与所述第二结果确定对应于的所述流式数据的流式运算结果。
数据处理方法装置电子设备存储介质

[发明专利]基于AI和流式计算的用户分析方法及系统-CN202211516603.8在审
发明人：王国华;姚锦权;邢祎哲 -专利权人：杭银消费金融股份有限公司
申请日： 2022-11-30 - 公布日： 2023-02-03 - 主分类号： G06F16/951 文献下载
摘要：本申请实施例提供的基于AI和流式计算的用户分析方法及系统，依据目标事件识别网络对流式数据事件集进行按组识别，在识别出包含目标事件数据的目标流式数据组的同时，还确定目标事件数据的事件分布，使得目标事件数据的识别过程更加精准此外，获得目标流式数据组后，依据流式数据组的时序和目标事件数据事件分布的匹配性对目标流式数据组进行划分，生成在采集时间上紧邻的目标流式数据序列，基于此得到的目标流式数据序列在拟分析流式数据事件集中的时序分布情况能够体现目标事件数据在拟分析流式数据事件集的时序分布情况，获得流式数据事件集中目标事件数据的时序分布情况以及目标事件数据的事件分布，使得目标事件识别的准确性得到提高。
基于 ai 计算用户分析方法系统

[发明专利]数据处理方法和数据处理装置-CN201911262422.5有效
发明人：安翔宇;刘重阳;周松桥;石泽涛 -专利权人：天翼云科技有限公司
申请日： 2019-12-11 - 公布日： 2023-10-13 - 主分类号： G06F16/2455 文献下载
摘要：本公开提供了一种数据处理方法和数据处理装置。数据处理方法包括：数据采集端采集流式数据文件，并获得流式数据文件的文件路径，根据该文件路径以及文件路径与数据类型的对应关系获得流式数据文件的数据类型，进而获得该流式数据文件的资源优先级；数据采集端根据该流式数据文件的资源优先级生成哈夫曼编码，并将流式数据文件和对应的哈夫曼编码传输到传输管道层；传输管道层对流式数据文件进行缓存，根据流式数据文件的哈夫曼编码获得该流式数据文件的资源优先级，并根据该资源优先级将该流式数据文件传输到数据输出端；以及数据输出端将该流式数据文件传输到外部设备本公开提高了数据的处理效率和灵活性。
数据处理方法装置

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
下一页»
尾页
共 100000 条