(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211234239.6 (22)申请日 2022.10.10 (71)申请人 云南电网有限责任公司电力科 学研 究院 地址 650000 云南省昆明市经济技 术开发 区云大西路10 5号 (72)发明人 杨迎春　罕天玺　赵旭　赵男　 李航　李根健　 (74)专利代理 机构 深圳中细软知识产权代理有 限公司 4 4528 专利代理师 黄劼 (51)Int.Cl. G06V 40/20(2022.01) G06V 20/40(2022.01) G06V 20/52(2022.01)G06Q 50/06(2012.01) (54)发明名称 一种辩识作业违章的方法、 装置及存 储介质 (57)摘要 本发明实施例公开了一种辩识作业违章方 法、 装置及存储介质， 其中， 该方法包括： 通过提 取所述作业场景视频流内疑似存在作业违章的 作业人员的姿态动作特征信息， 然后通过预建立 的知识图谱库识别并匹配预处理后的姿态特征 信息， 能够对作业人员的违章作业进行快速响 应， 并且， 通过作业场景视频流集合中作业场景 视频流的优先级， 对作业场景视频流进行排列， 优先响应辩识优先级高的作业场景视频流下的 作业人员的作业违章情况， 从而保证危险性较高 的作业场景可以及时的响应监测， 提高了监测的 时效性。 权利要求书3页 说明书13页 附图2页 CN 115546892 A 2022.12.30 CN 115546892 A 1.一种辩识作业违章方法， 其特 征在于， 所述方法包括： 获取作业场景视频流集合； 其中， 所述作业场景视频流集合包括至少一个作业场景视 频流； 当所述作业场景视频流集合包括一个作业场景视频流 时， 则提取所述作业场景视频流 内疑似存在作业违章的作业人员的姿态动作特征信息， 并对姿态动作特征信息进行预处 理； 当所述作业场景视频流集合包括至少两个作业场景视频流 时， 获取所述作业场景视频 流集合中每个作业场景视频流的优先级， 基于作业场景视频流的优先级， 依 次获取作业场 景视频流集合中， 作业场景视频流内疑似存在作业违章的作业人员的姿态动作特征信息， 得到每个作业场景视频流内疑似存在作业违章的作业人员的姿态动作特征信息， 并对姿态 动作特征信息进行 预处理； 预先建立知识图谱库； 其中， 所述知识图谱库包含了作业违章时作业人员的姿态动作 特征信息； 将预处理后的姿态动作特征信 息与预先建立的知识图谱库进行匹配， 根据匹配结果辩 识所述疑似 存在作业违章的作业人员是否存在作业违章。 2.根据权利要求1所述的方法， 其特征在于， 所述获取所述作业场景视频流集合中每个 作业场景视频流的优先级， 包括： 获取所述作业场景视频流集合中目标视频流所包含的场景元素的优先级； 其中， 所述 目标视频流 为所述作业场景视频流 集合中任意 一个作业场景视频流； 基于目标视频流所包 含的场景 元素的优先级， 得到目标视频流的优先级。 3.根据权利要求2所述的方法， 所述获取所述作业场景视频流集合中目标视频流所包 含的场景 元素的优先级， 包括： 构建优先级元素原始数组， 其中， 所述优先级元素原始数组包括预定数量的不同优先 级的场景 元素， 且预定数量与场景 元素总数相同； 基于构建好的优先级场景元素原始数组创建场景消息数组， 重置优先级场景元素原始 数组， 使得优先级场景元素原始数组与场景消息数组长度一致； 其中， 所述场景消息数组为 用于更新优先级场景 元素原始数组的实时数据； 识别目标视频流内所包含的全部场景元素， 得到目标视频流所对应的场景元素集合； 其中， 所述场景 元素集合至少包 含一个场景 元素； 将所述场景元素集合中的场景元素输入至场景消息数组中， 得到目标视频流所包含的 场景元素的优先级。 4.根据权利要求2所述的方法， 其特征在于， 所述基于目标视频流所包含的场景元素的 优先级， 得到目标视频流的优先级， 包括： 当目标视频流是包含单个场景元素时， 将所述单个场景元素的优先级作为目标视频流 的优先级； 当目标视频流是包含至少两个场景元素时， 将至少两个场景元素中优先级最高的场景 元素的优先级作为目标视频流的优先级。 5.根据权利要求1所述的方法， 其特征在于， 所述基于作业场景视频流的优先级， 依次 获取作业场景视频流集合中， 作业场景视频流内疑似存在作业违章的作业人员的姿态动作权　利　要　求　书 1/3 页 2 CN 115546892 A 2特征信息， 包括： 基于作业场景视频流的优先级， 对所述作业场景视频流集合中的作业场景视频流进行 排列； 根据作业场景视频流的排列序号， 遍历作业场景视频流 集合中的作业场景视频流； 对于遍历到的目标作业场景视频流， 获取目标作业场景视频流信 息； 其中， 所述目标作 业场景视频流信息包括目标作业场景视频流内所包含的危险设施的视频流以及目标作业 场景视频流内所包 含的作业人员动作的视频流； 将所述目标作业场景视频流信息中的视频流转换为图像流， 形成待处理的图像流集 合； 其中， 视频流包括 目标作业场景视频流内所包含的危险设施的视频流以及目标作业场 景视频流内所包 含的作业人员动作的视频流； 从所述待处理的图像流集合筛选出疑似违规图像， 并从所述疑似违规图像中提取所述 疑似违规图像所包含的作业人员的姿态动作特征信息； 其中， 疑似违规图像为疑似存在作 业违章的作业人员的图像。 6.根据权利要求5所述的方法， 其特征在于， 所述从所述疑似违规图像中提取所述疑似 违规图像所包 含的作业人员的姿态动作特 征信息， 包括： 对疑似违规图像进行分解， 使疑似违规图像的单组图像图像信 息转化为不同尺寸的图 像数据信息分解 集； 识别不同尺寸的图像数据信 息分解集， 提取不同尺寸的图像数据信 息分解集中单组图 像数据信息的像素属性定义； 对所述像素属性定义进行分解， 得到分解后的图像分解数据， 根据 所述图像分解数据， 提取疑似违规图像的姿态动作特 征信息。 7.根据权利要求1所述的方法， 其特 征在于， 所述预 先建立知识图谱库， 包括： 获取标准违章作业图像集； 提取标准违章作业图像集中作业人员的姿态动作特 征信息， 形成知识图谱库。 8.根据权利要求1 ‑7所述的方法， 其特 征在于， 所述预 先建立知识图谱库， 还 包括： 从所述待处理的图像流集合中， 提取目标作业场景内危险设施的特征信息， 将所述目 标作业场景内危险设施的特征信息录入知识图谱库， 对知识图谱库进行补充， 建立新的知 识图谱库。 9.一种辩识作业违章装置， 其特 征在于， 所述装置包括： 获取模块： 用于获取作业场景视频流集合； 其中， 所述作业场景视频流集合包括至少一 个作业场景视频流； 第一姿态特征提取模块： 用于当所述作业场景视频流集合包括一个作业场景视频流 时， 则提取所述作业场景视频流内疑似存在作业违章的作业人员的姿态动作特征信息， 并 对姿态动作特 征信息进行 预处理； 第二姿态特征提取模块： 用于当所述作业场景视频流集合包括至少两个作业场景视频 流时， 获取所述作业场景视频流集合中每个作业场景视频流的优先级， 基于作业场景视频 流的优先级， 依 次获取作业场景视频流集合中， 作业场景视频流内疑似存在作业违章的作 业人员的姿态动作特征信息， 得到每个作业场景视频流内疑似存在作业违章的作业人员的 姿态动作特 征信息， 并对姿态动作特 征信息进行 预处理；权　利　要　求　书 2/3 页 3 CN 115546892 A 3