“去重”专利关键词查询_检索下载_查询列表_检索列表_行业专利分布_钻瓜专利网

钻瓜专利网为您找到相关结果446764个，建议您升级VIP下载更多相关专利

[发明专利]一种文章去重方法、装置、设备及存储介质-CN201910877090.5在审
发明人：任志伟 -专利权人：北京国双科技有限公司
申请日： 2019-09-17 - 公布日： 2021-03-19 - 主分类号： G06F16/951 文献下载
摘要：本申请公开了一种文章去重方法、装置、设备及存储介质，包括：获取待去重的目标文章，并确定出该目标文章中每篇文章所对应的文章属性，该文章属性用于唯一标识文章；根据所确定出的每篇文章对应的文章属性对目标文章进行去重由于文章属性与文章之间通常是一一对应的关系，因此，基于所确定出的文章属性对目标文章进行去重，可以使得去重后所得到的文章之间互不相同，从而降低了去重后的文章之间的重复率，进而可以提高去重后的文章数据的唯一性，也即提高了文章数据的去重效果。
一种文章方法装置设备存储介质

[发明专利]一种基于滑动窗口分块优化算法的云存储去重方法及设备-CN202111548991.3在审
发明人：张鑫宇;张品 -专利权人：杭州电子科技大学
申请日： 2021-12-17 - 公布日： 2022-03-15 - 主分类号： G06F16/13 文献下载
摘要：本发明属于云存储的去重技术领域，具体涉及一种基于滑动窗口分块优化算法的云存储去重方法及设备。其云存储去重方法，基于滑动窗口的分块优化算法，通过滑动窗口的移动，确定滑动窗口的当前位置，并与文件位置进行比较，以进行不同的去重步骤，去重主要思路为通过多次分块并计算哈希值，并判断是否存在重复的哈希值以进行去重，能够更加有效地增大块级去重方法的去重率，提高网络带宽利用率，具有网络带宽利用率高，容易实现等优点，充分利用Bloom过滤器的特点，减少了文件所占内存，用极小的空间换来了极大的性能优势。
一种基于滑动窗口分块优化算法存储方法设备

[发明专利]一种数据去重方法及装置-CN201910756841.8在审
发明人：汤高蒙 -专利权人：苏州浪潮智能科技有限公司
申请日： 2019-08-16 - 公布日： 2019-12-13 - 主分类号： G06F16/182 文献下载
摘要：本申请实施例提供一种数据去重方法及装置，所述方法包括：获得待去重的多个数据行和去重字段；基于所述去重字段和所述多个数据行，生成所述多个数据行各自对应的数据行标识；基于所述多个数据行各自对应的数据行标识，对所述多个数据行中具有相同的数据行标识的数据行进行去重处理，获得去重结果。
数据行去重存储空间冗余数据节约申请

[发明专利]对象去重方法和装置、存储介质及电子设备-CN202110179451.6在审
发明人：黄铁鸣;刘跃;陈郁;林莉;李斌 -专利权人：腾讯科技（深圳）有限公司
申请日： 2021-02-09 - 公布日： 2021-10-29 - 主分类号： G06F16/215 文献下载
摘要：本发明公开了一种对象去重方法和装置、存储介质及电子设备。其中，该方法包括：获取在通信客户端中触发的去重筛选请求；将去重筛选请求发送给后台服务器，并获取后台服务器返回的筛选结果，其中，筛选结果中包括与目标群主账号对应的候选群组，候选群组中包括目标对象，目标对象出现在目标群主账号管理的至少两个群组中；在通信客户端中显示候选群组，并利用从候选群组中确定出的目标群组生成去重处理请求；向后台服务器发送去重处理请求，并获取后台服务器根据去重处理请求对目标群组执行去重处理所得到的去重结果。本发明解决了由于相关技术中提供的去重操作较繁琐，造成的去重效率较低的技术问题。
对象方法装置存储介质电子设备

[发明专利]一种分布式数据去重处理方法及装置-CN201510893456.X有效
发明人：柯钦武 -专利权人：广州华多网络科技有限公司
申请日： 2015-11-27 - 公布日： 2019-03-01 - 主分类号： G06F16/215 文献下载
摘要：本发明实施例公开了一种分布式数据去重处理方法及装置，解决了目前的精确去重但是非即席查询，所导致的在数据量较大时往往需要较长的计算时间才能得出结果的技术问题，以及非精确去重的即席查询，导致的计算出来的结果不是精确值的技术问题本发明实施例分布式数据去重处理方法包括：将具有相同去重字段值的数据对应存储在预置分片中；将存储在预置分片中的所有数据进行列存储到Lucene中；根据Lucene提取每个预置分片中的去重列，并进行每一列的倒排索引；根据每个预置分片的倒排索引获取去重列对应的去重值；将获取到的所有去重值进行累加获取到最终去重值。
一种分布式数据处理方法装置

[发明专利]一种超精密柔性转子双面在线去重动平衡系统-CN202010018856.7有效
发明人：运侠伦;袁世珏;梅雪松;姜歌东;王晨;庞哲凯 -专利权人：西安交通大学
申请日： 2020-01-08 - 公布日： 2021-02-02 - 主分类号： B23K26/36 文献下载
摘要：一种超精密柔性转子双面在线去重动平衡系统，包括超高速柔性主轴，超高速柔性主轴支撑在主轴夹具上，超高速柔性主轴的两端安装有不平衡去重盘，每个不平衡去重盘旁边配合有一个激光在线去重系统，两个激光在线去重系统和一个测控系统连接，激光在线去重系统实现上下和左右两个方向的位置调整以及去重激光器两个方向的旋转运动调姿，测控系统实现复杂工况条件下振动信号的采集与精确提取、激光去重系统位置与去重激光器姿态调整控制、激光脉冲发射控制以及人机交互的功能；本发明结合激光快速去除技术，实现了超高速柔性转子旋转状态下的不平衡测试与自动去重功能，节约了人工成本，大大提高了平衡效率。
一种精密柔性转子双面在线动平衡系统

[发明专利]一种统一资源定位符的去重方法、装置及电子设备-CN201810759030.9在审
发明人：余成章;陈雅芳;王意林;李攀 -专利权人：阿里巴巴集团控股有限公司
申请日： 2018-07-11 - 公布日： 2020-01-21 - 主分类号： G06F16/35 文献下载
摘要：本申请公开了一种统一资源定位符的去重方法、装置及电子设备。URL进行聚类处理，获得至少一个URL簇；确定所述至少一个URL簇中的目标URL簇，所述目标URL簇为URL数量满足预定阈值的URL簇；基于所述目标URL簇的URL共性结构，确定所述目标URL簇对应的去重URL，所述去重URL用于表示所述目标URL簇中的URL。本申请通过对URL集中的URL进行聚类处理，以确定URL数量满足预定阈值的URL簇，并基于URL簇的URL共性结构确定其去重URL，进而可基于其去重URL对本URL集或后续的URL集进行去重处理。与现有技术中，人为设定去重规则对应的去重URL的方案相比，能够智能化地确定去重URL，具有去重效率高、精度高的优点。
去重目标URL 统一资源定位符聚类处理装置及电子设备结构确定智能化申请

[发明专利]Netflow数据去重方法、装置、电子设备及存储介质-CN202011333594.X有效
发明人：高璐;赵明 -专利权人：北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司
申请日： 2020-11-24 - 公布日： 2023-05-02 - 主分类号： H04L9/40 文献下载
摘要：本申请提供一种NetFlow数据去重方法、装置、电子设备及存储介质，包括：获取在预设时间段内采集到的至少两个NetFlow数据信息，以及采集各个NetFlow数据信息所用采集设备的IP地址；其中，所述采集设备的数量为至少两个；每个NetFlow数据信息包括：元组信息和下一跳地址；所述元组信息包括：源IP地址、目的IP地址、源端口和目的端口；根据所述至少两个NetFlow数据信息，确定出具有相同的元组信息的至少两个待去重的数据信息；针对所述至少两个待去重的数据信息中的每个待去重的数据信息，在确定该待去重的数据信息的下一跳地址表征不会将该待去重的数据信息转发给其余设备时，根据所述至少两个待去重的数据信息中的每个待去重的数据信息所对应的采集设备的IP地址，对所述至少两个待去重的数据信息进行准确地去重。
netflow 数据方法装置电子设备存储介质

[发明专利]一种加密数据去重方法、系统及相关装置-CN201910464659.5有效
发明人：咸鹤群;高文静 -专利权人：青岛大学
申请日： 2019-05-30 - 公布日： 2023-05-09 - 主分类号： G06F16/215 文献下载
摘要：本申请所提供的一种加密数据去重方法，包括：基于第一标签生成函数计算目标文件对应的第一标签，并将第一标签上传至云服务器进行文件级重复性检测，得到文件级重复性检测结果；若文件级重复性检测结果为云服务器上存在第一标签，则执行文件级数据去重操作；若文件级重复性检测结果为云服务器上不存在第一标签，则执行块级数据去重操作。该方法根据文件级重复性检测结果的不同，分别执行对应的文件级数据去重操作和块级数据去重操作，也即该方法结合了文件级数据去重和块级数据去重，对文件和数据块均可以进行去重，故能够提高云服务器上加密数据的去重效率本申请还提供一种加密数据去重系统、设备及计算机可读存储介质，均具有上述有益效果。
一种加密数据方法系统相关装置

[发明专利]一种数据去重的方法和系统-CN201910831594.3有效
发明人：范东;孙迁;汪金忠 -专利权人：苏宁云计算有限公司
申请日： 2019-09-04 - 公布日： 2022-07-05 - 主分类号： G06F16/215 文献下载
摘要：本发明公开了一种数据去重的方法和系统，所述方法包括以下步骤：在数据库中设计去重字典表数组，在去重字典表数组中增加一列数据加速层，将所述去重字典表数组和所述数据加速层进行维度关联匹配；将待去重数据映射到所述去重字典表数组中，再将去重字典表数组导入到所述数据加速层的数据管理系统，通过所述数据管理系统将所述去重字典表数组中的所述待去重数据转化为bit格式并存储于Bitmap集合中，使得待去重数据转化为所述数据加速层中新的一列；在所述Bitmap集合中，利用去重函数，统一对待去重数据进行精确去重，筛选掉重复的数据。
一种数据方法系统

[发明专利]用于去重的方法和设备-CN202110645876.1在审
发明人：张雷虎;方皓;宫晨;张明;王永利;陈欢 -专利权人：伊姆西IP控股有限责任公司
申请日： 2017-06-02 - 公布日： 2021-08-24 - 主分类号： G06F3/06 文献下载
摘要：本公开的各实施例涉及用于去重的方法和设备。具体地，该方法包括获取文件流的属性，文件流的属性包括文件类型或者标识协议或者文件的格式的幻数；响应于接收到针对文件流的数据块的I/O请求，基于文件流的属性，为I/O请求指派去重级别；以及基于被指派给I/O请求的去重级别，对文件流的数据块进行去重，至少部分通过响应于被指派的去重级别是第一去重级别，跳过对文件流的数据块的去重。
用于方法设备

[发明专利]一种货架图片识别结果去重及拼接的方法和设备-CN202110965302.2在审
发明人：刘国俭;刘昭;许允杰;夏奕 -专利权人：南京掌控网络科技有限公司
申请日： 2021-08-23 - 公布日： 2021-12-10 - 主分类号： G06T5/50 文献下载
摘要：本发明公开了一种货架图片识别结果去重及拼接的方法，包括获取同一货架的多张图像；将多张图像输入到预先训练好的目标检测模型进行识别并获取货架上摆放的商品信息；对识别出的商品信息按在货架上的摆放位置进行分层；选择两张图片对应的识别结果进行去重并得到去重后的识别结果；选择所有识别结果分别进行两两去重，得到最终去重结果；根据最终去重结果进行图像裁剪及拼接，获取货架拼接图。本发明能够根据目标检测模型的识别结果进行去重并根据去重结果对图片进行剪裁并拼接，从而降低拍照要求，提升拼接速度并获取完整的货架图片和对应的识别结果。
一种货架图片识别结果拼接方法设备

[发明专利]文本去重方法和装置、电子设备、存储介质-CN202210056358.0有效
发明人：罗圣西;马骏;王少军 -专利权人：平安科技（深圳）有限公司
申请日： 2022-01-18 - 公布日： 2023-07-14 - 主分类号： G06F40/295 文献下载
摘要：本发明实施例提供文本去重方法和装置、电子设备、存储介质，涉及人工智能技术领域。该文本去重方法，包括：通过获取待去重文本，利用预设实体词语列表根据待去重文本生成实体词语编号文本，根据实体词语编号文本生成字符片段列表，对字符片段列表进行去重操作，得到第一结果列表，根据第一结果列表生成去重结果信息本实施例考虑到待去重文本中出现包含重复字符的实体词语的情况，在不影响其他字符去重效果的基础上，避免去重时将实体词语中的重复字符也去除导致口语意图识别效果不佳，能够更准确地获取意图识别信息，提高口语意图识别的鲁棒性以及可扩展性
文本方法装置电子设备存储介质

[发明专利]基于深度学习的漏洞去重方法及装置-CN202111598277.5有效
发明人：邱杰;刘钰;贾梦妮;黄鹏;刘德安 -专利权人：中电信数智科技有限公司
申请日： 2021-12-24 - 公布日： 2023-01-10 - 主分类号： G06F21/57 文献下载
摘要：本发明公开了基于深度学习的漏洞去重方法，包括：取出两条漏洞的字段数据，在字段数据前添加字段类型，然后执行拼接；将拼接得到的数据输入所述漏洞去重模型，输出待去重的两条漏洞的相似度，若相似度大于预定阈值，则判断取出的待去重的两条漏洞重复，所述漏洞去重模型由ERNIE2.0模型微调得到。本发明还提供了基于深度学习的漏洞去重装置。本发明的去重方法具有高准确率、高智能化、高效率等特点。
基于深度学习漏洞方法装置

[发明专利]基于边云协同的云数据去重方法-CN202210023210.7有效
发明人：石朋亮;杜瑞忠;王熙;汪晓慧 -专利权人：河北大学
申请日： 2022-01-10 - 公布日： 2023-07-14 - 主分类号： H04L9/08 文献下载
摘要：本发明提供了一种基于边云协同的云数据去重方法，其特征是，包括以下步骤：A、在密钥服务器输入安全参数k，为各个边缘节点生成密钥；B、对用户数据生成并输出文件密文C和内部去重标签的一致性，并去重；D、云服务器检验数据和外部去重标签csp_dep的一致性，并去重；E、用户文件解密。本发明采用端‑边‑云式的新方法来替换以前端‑云式方法，将云服务器部分去重功能下沉到靠近用户的边缘节点层，采用边缘节点层执行内部去重，云服务器执行外部去重。这种新的边云协同方式，在减少通信开销的同时提高数据去重的效率。
基于协同数据方法