[发明专利]口腔器械消毒灭菌操作监控方法及装置

说明书

本发明公开一种口腔器械消毒灭菌操作监控方法及装置。本发明通过将口腔清洗间拍摄到的视频文件传入到算法中进行处理，遍历整个视频并通过声音和画面两个角度，各自对视频进行分析，从中提取出有效信息，再结合信息进行逻辑判断，可以识别出整个终末漂洗过程中最重要并且识别度较高的两类事件：从超声仪中放入/取出需清洗的牙医器械，以及在水槽中对超声仪清洗过的器械用流动水进行终末漂洗，从而判断出整个视频中是否发生规范的终末漂洗事件。

技术领域

本发明涉及计算机技术领域，尤其涉及一种口腔器械消毒灭菌操作监控方法及装置。

背景技术

在2020年爆发新型冠状病毒疫情之后，国家卫生健康委员会加强了对牙医诊所清洗间的监控。目前现有的监控方法是在各牙医诊所清洗间部署摄像头，拍摄下诊所营业时清洗间的画面，再交由专职人员查看。这种做法的优点在于，完全通过视频进行检查，观察清洗人员是否按照《口腔器械消毒灭菌技术操作规范》中要求的清洗流程进行清洗。依靠人工判断，不会出现误判。但牙医诊所数量较大，且一天中清洗时间又不固定，很难精确地找到每一天中清洗人员所有的清洗操作，若完全依赖于人工监督会消耗大量的时间和人力资源，而且难以保证在检查时不会发生漏看的情况。若要解决这一问题，可以利用人工智能领域中的行为检测算法，通过对捕捉到的画面进行分析计算，识别视频中进行了清洗操作的部分，并直接交由算法判断其是否符合《规范》的要求，或是可以排除掉视频中大量的无用片段，只保留算法认为比较可能在进行清洗的片段，交给工作人员检查，如此一来也可以在保证准确率的前提下大量的减少人工检查的工作量。

目前已有的人工智能领域中虽然有对人体行为检测方向的研究，但更多的是针对于跑、跳、行走等更一般化的行为，缺少对于在清洗间进行器械清洗这一更加特定化的行为的研究，因而仅靠目前已有的行为检测领域的算法，难以实现对清洗间清洗操作是否规范进行监督。此外，现有的人体姿态检测算法大多无法做到时序检测，能够做到时序检测的算法运行起来会花费大量的算力，难以运用到实际使用中。

发明内容

本发明提供一种口腔器械消毒灭菌操作监控方法及装置，以解决现有的人体姿态检测算法缺少对于在清洗间进行器械清洗这一更加特定化的行为的研究，难以实现对清洗间清洗操作是否规范进行监督的问题。

第一方面，本发明提供一种口腔器械消毒灭菌操作监控方法，包括：

读取第一json文件和口腔清洗间拍摄到的视频文件，其中，所述第一json文件记录有水槽位置信息、视频文件所在位置的绝对路径以及输出文件的绝对路径；

对所述视频文件进行解析，得到音频和画面；

将所述音频切割为多段音频，以保证每段音频内容的单一性；

将切割得到的每一段音频带入到水声检测模型中，以检测每一段音频中是否出现水声，并将水声检测结果保存在列表中；

将所述画面进行灰度化及高斯模糊处理；

将所述画面带入到人体检测模型中，以对所述画面中出现的人体进行检测，其中，检测时加大手部和肘部的权重，并在检测结果汇总之后用一个点来代替人体位置信息，将人体位置信息存储在列表中；

调用所述水槽位置信息和人体位置信息；

根据所述水槽位置信息和人体位置信息，判断水槽和人的位置是否在预定的距离内；

如果水槽和人的位置在预定的距离内，根据所述水声检测结果，识别同时音频中是否出现水声；

如果水槽和人的位置在预定的距离内，并且同时音频中出现水声，判定操作员做出了冲洗动作；

如果水槽和人的位置在预定的距离内，但音频中未同时出现水声，判定操作员没有做出冲洗动作；