[发明专利]人工标注质量的评估方法、装置、电子设备及存储介质有效
申请号: | 202010080303.4 | 申请日: | 2020-02-05 |
公开(公告)号: | CN111291567B | 公开(公告)日: | 2023-08-25 |
发明(设计)人: | 鲍红飞;王道广;袁灿;于政 | 申请(专利权)人: | 北京明略软件系统有限公司 |
主分类号: | G06F40/295 | 分类号: | G06F40/295;G06F40/117;G06F40/169;G06N20/00 |
代理公司: | 北京超成律师事务所 11646 | 代理人: | 邓超 |
地址: | 100000 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请提供了一种人工标注质量的评估方法、装置、电子设备及存储介质,其中,所述评估方法包括获取多个标注人员中每个标注人员对每份待评估数据中实体特征的改动标注;基于改动标注,确定在至少一个标注评估维度下,每个标注人员针对对应改动标注的待评估数据进行改动标注的评估值;统计每个标注人员在各个维度下的评估值,确定汇总值;确定所有汇总值中最大的汇总值所对应的标注人员为标注质量最差的标注人员。本申请实施例筛除了标注质量最差的标注人员对数据进行改动标注的标注结果,提高了数据标注的标注质量。 | ||
搜索关键词: | 人工 标注 质量 评估 方法 装置 电子设备 存储 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京明略软件系统有限公司,未经北京明略软件系统有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010080303.4/,转载请声明来源钻瓜专利网。
- 上一篇:塑料瓶分离压缩装置
- 下一篇:一种定位方法、装置及系统