(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111589439.9 (22)申请日 2021.12.23 (71)申请人 国网福建省电力有限公司信息通信 分公司 地址 350013 福建省福州市晋安区茶园路 64号 (72)发明人 潘丹　王栋　翁凌雯　林嘉　李棋　 谢乾武　胡东升　常尧　 (74)专利代理 机构 合肥昊晟德专利代理事务所 (普通合伙) 3415 3 代理人 何梓秋 (51)Int.Cl. G06V 10/764(2022.01) G06V 10/774(2022.01) G06V 10/44(2022.01)G06Q 50/06(2012.01) G06T 7/11(2017.01) G06T 7/60(2017.01) G06F 16/2455(2019.01) G06V 20/40(2022.01) (54)发明名称 一种变电站内物品遗留管控方法及模块 (57)摘要 本发明公开了一种变电站内物品遗留管控 方法及模块， 属于物品遗留检测技术领域。 本发 明在规定的区域内， 通过经过大量已标注图片训 练的物品检测模型对区域内遗留的工具物品进 行检测， 并对 各类工具物品图像中包含的预设平 面标识进行检测识别并粗分类， 获取区域内遗留 的各工具物品的分类及各类中包含的数量， 再利 用物品所属信息关联子模块对遗留的各工具物 品上的标识特征信息进行与所属的操作人员信 息进行关联， 实现责任到个人， 便于管控工作的 进行， 二级分类的逻辑简单， 可大大降低分类网 络模型的复杂度， 进 而可提升分类 速度。 权利要求书3页 说明书7页 附图1页 CN 114255372 A 2022.03.29 CN 114255372 A 1.一种变电站内物品遗留管控方法， 其特 征在于， 包括以下步骤： S1： 在规定的区域内， 判断区域内是否存在操作人员， 通过摄像头周期性采集区域图 像， 进而对区域图像内包含的物品状态进行判断， 然后将判断为遗留状态的区域图像传输 下一步轴； S2： 将判断为遗留状态 的区域图像输入已训练的物品检测模型， 对区域图像中遗留的 工具物品进行检测， 输出 各工具物品在图像中对应的物品box； S3： 在各工具物品被物品检测模型识别并输出对应的物品box后， 以各物品box 的边界 为裁剪边界， 获取各工具物品图像， 然后各工具物品图像输入已训练的标识检测模型， 基于 各标识的形状特征对各工具物品上的标识进 行识别， 输出各工具物品在图像中对应的标识 box， 并记录各工具物品的分类及各类中包 含的数量； S4： 在各工具物品的标识被标识检测模型识别并输出对应的标识box后， 以各标识box 的边界为裁剪边界， 获取各工具物品的标识图像， 根据各工具物品的标识图像的标识特征 信息与数据库中工具物品所属的操作人员信息进行关联； S5： 输出各工具物品的分类及各类 中包含的数量、 工具物品对应区域、 各工具物品所属 的操作人员信息 。 2.根据权利要求1所述的一种变电站内物品遗留管控方法， 其特征在于： 在所述步骤S1 中， 摄像头上安装有红外传感器， 通过所述红外传感器判断区域内是否存在操作人员， 在区 域内存在操作人员时， 判断区域内的工具物品为非遗留状态， 则不启动摄像头进行区域图 像的获取； 当区域内不存在操作人员达到 设定时长后， 判断区域内的工具物品为遗留状态， 则启动摄 像头进行区域图像的获取。 3.根据权利要求1所述的一种变电站内物品遗留管控方法， 其特征在于： 在所述步骤S2 中， 遗留的工具物品分为安全工具类、 手工具类、 辅助工具类， 各工具物品上 的标识为提前 预置的平面标识， 所述平面标识的底部与工具物品外形轮廓相匹配， 顶部为平 面， 设置在所 述工具物品上的多个面上， 在单个工具物品图像中， 仅有一个完整的平面标识存在， 且单个 工具物品上只存在一种平面标识， 同一工具物品上 各个面的标识均是相同的。 4.根据权利要求3所述的一种变电站内物品遗留管控方法， 其特征在于： 所述平面标识 的种类分为三种， 分别为圆形平 面标识、 矩形平面标识、 三角形平 面标识， 其中， 圆形平 面标 识对应安全工具类工具物品， 矩形平面标识对应手工具类工具物品， 三角形平面标识对应 辅助工具类工具物品。 5.根据权利要求4所述的一种变电站内物品遗留管控方法， 其特征在于： 在所述步骤S4 中， 利用圆形平面标识、 矩形平面标识、 三角形平面标识中的特征信息进 行与数据库中工具 物品所属的操作人员信息的关联工作的， 具体的关联 过程如下： S41： 输入工具物品的标识图像， 识别输入的工具物品的标识图像中所包含的标识类 型， 确定标识类型 是圆形平面标识、 矩形平面标识、 三角形平面标识中的哪种； S42： 提取不同标识类型中的特征信 息并与数据库中预设的对应信息进行对比， 获取对 比结果。 6.根据权利要求5所述的一种变电站内物品遗留管控方法， 其特征在于： 在所述步骤 S42中， 对于圆形平面标识， 对圆形平面标识进行轮廓检测， 获取圆形平面标识的轮廓线信 息， 对轮廓线信息中半径连线的数量进 行检测， 获取圆形平 面标识中的半径连线 数量信息，权　利　要　求　书 1/3 页 2 CN 114255372 A 2根据半径连线 数量信息与数据库中工具物品所属的操作人员信息进行比对， 进而确定工具 物品所属的操作人员； 对于矩形平面标识， 对矩形平面标识进 行轮廓检测， 获取矩形平面标 识的轮廓线信息， 计算轮廓线信息中的长宽比， 获取矩形平 面标识中的长宽比信息， 根据长 宽比信息与数据库中工具物品所属的操作人员信息进 行比对， 进而确定工具物品所属的操 作人员； 对于三角形平面标识， 对三角形平面标识进 行轮廓检测， 获取三角形平面标识的轮 廓线信息， 计算轮廓线信息中最大 的内角角度值， 获取三角形平面标识中的最大内角值信 息， 根据最大内角值信息与数据库中工具物品所属的操作人员信息进行比对， 进而确定工 具物品所属的操作人员。 7.根据权利要求6所述的一种变电站内物品遗留管控方法， 其特征在于： 数据库包括半 径连线数量信息数据库、 长宽比信息数据库、 最大内角值信息数据库， 其中， 所述半径连线 数量信息数据库中存储有可预设的圆形平面标识半径连线数量与安全工具类工具物品所 属的操作人员信息之间的映射关系数据， 所述长宽比信息数据库中存储有 可预设的矩形平 面标识长宽比与手工具类工具物品所属的操作人员信息之 间的映射关系数据， 所述最大内 角值信息数据库中存储有可预设的三角形平面标识最大内角值与辅助工具类工具物品所 属的操作人员信息之间的映射关系数据。 8.根据权利要求7所述的一种变电站内物品遗留管控方法， 其特征在于： 在所述步骤S5 中， 利用输出的各工具物品的分类及各类中包含的数量、 工具物品对应区域， 对设定单位时 间内区域物品遗留管控效果评分， 计算公式如下： T＝B1*W1+B2*W2+B3*W3 W1＝Cb1/(Cb1+Cb2+Cb3) W2＝Cb2/(Cb1+Cb2+Cb3) W3＝Cb3/(Cb1+Cb2+Cb3) 其中， T表示设定单位时间内区域物品遗留管控效果评分， B1表示单个圆形平面标识的 得分， B2表示单个矩形平面 标识的得分， B3表示单个三角形平面 标识的得分， W1、 W2、 W3分别表 示在设定单位时间内安全工具类、 手工具类、 辅助工具类遗留在该区域内的数量所占的权 重， Cb1、 Cb2、 Cb3分别表示在设定单位时间内安全工具类、 手工具类、 辅助工具类遗留在该区 域内的数量。 9.一种变电站内物品遗 留管控系统， 其特征在于， 采用如权利要求8所述的物品遗 留管 控方法对变电站内区域的物品遗留状态进行 管控， 包括： 图像采集子模块， 用于在规定的区域内， 判断区域内是否存在操作人员， 通过摄像头周 期性采集区域图像， 进而对区域图像内包含的物品状态进行判断， 然后将判断为遗留状态 的区域图像传输 至物品检测子模块； 物品检测子模块， 用于将判断为遗留状态的区域图像输入已训练的物品检测模型， 对 区域图像中遗留的工具物品进行检测， 输出 各工具物品在图像中对应的物品box； 标识检测子模块， 用于在各工具物品被物品检测模型识别并输出对应的物品box后， 以 各box的边界为裁剪边界， 获取各工具物品图像， 然后各工具物品图像输入已训练的标识检 测模型， 对各工具物品上的标识进行识别， 输出各工具物品在图像中对应的标识box， 并记 录各工具物品的分类及各类中包 含的数量； 物品所属信 息关联子模块， 用于在各工具物品的标识被标识检测模型识别并输出对应权　利　要　求　书 2/3 页 3 CN 114255372 A 3