(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210581561.X (22)申请日 2022.05.26 (71)申请人 深圳市科荣软件股份有限公司 地址 518000 广东省深圳市罗湖区翠竹街 道翠宁社区太宁 路85号科技大厦主楼 401室 (72)发明人 杨涛　彭保　齐觊　 (74)专利代理 机构 深圳市智胜联合知识产权代 理有限公司 4 4368 专利代理师 王月 (51)Int.Cl. G06V 40/20(2022.01) G06V 10/82(2022.01) G06V 10/80(2022.01) G06V 10/764(2022.01)G06V 10/30(2022.01) G06V 10/28(2022.01) G06N 3/08(2006.01) G06N 3/04(2006.01) G06K 9/62(2022.01) (54)发明名称 一种工地人员安全行为识别方法及装置 (57)摘要 本发明实施例提供了一种工地人员安全行 为识别方法及装置， 通过 获取工作区域内工作人 员视频数据， 并依据全卷积神经网络确定所述视 频数据中所述工作人员的外部特征； 依据所述工 作人员的外部特征生成骨骼关键点的位置数据 以及骨骼关键点之间的连接信息数据； 依据所述 工作人员的外部特征、 骨骼关键点的位置数据以 及骨骼关键点之间的连接信息数据生成相对应 的工作人员的骨骼信息； 依据所述工作人员的骨 骼信息生 成工作人员的姿态特征； 依据所述姿态 特征生成所述工作人员的行为的安全结果； 其 中， 所述安全结果包括安全和不安全。 通过色彩 增强、 灰度化等图像处理操作得到更适合神经网 络处理分析的图像， 提高数据处 理的效率。 权利要求书2页 说明书18页 附图8页 CN 114998990 A 2022.09.02 CN 114998990 A 1.一种工地人员安全行为识别方法， 所述方法用于对工地人员行为是否安全进行识 别， 其特征在于， 包括： 获取工作区域内工作 人员视频数据， 并依据全卷积神经网络确定所述视频数据中所述 工作人员的外 部特征； 依据所述工作人员的外部特征生成骨骼关键点的位置数据以及骨骼关键点之间的连 接信息数据； 依据所述工作 人员的外部特征、 骨骼关键点的位置数据以及骨骼关键点之间的连接信 息数据生成相对应的工作人员的骨骼信息； 依据所述工作人员的骨骼信息生成工作人员的姿态特 征； 依据所述姿态特征生成所述工作人员的行为的安全结果； 其中， 所述安全结果包括安 全和不安全。 2.根据权利要求1所述的工地人员安全行为识别方法， 其特征在于， 所述依据全卷积神 经网络确定所述视频 数据中所述工作人员的外 部特征的步骤， 包括： 依据所述视频 数据中的每帧图像分别进行彩色图像增强生成相对应的增强图像； 依据所述增强图像中进行 灰度化生成相对应的灰度图像； 将所述灰度图输入 全卷积神经网络获得 所述工作人员的外 部特征。 3.根据权利要求2所述的工地人员安全行为识别方法， 其特征在于， 所述依据 所述视频 数据中的每帧图像分别进行彩色图像增强生成相对应的增强图像的步骤， 包括： 依据所述视频数据中的每帧图像分别生成子灰度直方图集； 其中， 所述子灰度直方图 集包括第一子灰度直方图、 第二子灰度直方图、 第三子灰度直方图以及第四子灰度直方图； 依据所述子灰度直方图集生成均衡直方图集； 其中， 所述均衡直方图集包括第一均衡 直方图、 第二均衡直方图、 第三均衡直方图以及第四均衡直方图； 依据所述均衡直方图集 生成相对应的增强图像。 4.根据权利要求3所述的工地人员安全行为识别方法， 其特征在于， 所述依据 所述均衡 直方图集 生成相对应的增强图像的步骤， 包括： 确定所述均衡直方图集内的第一均衡直方图、 第二均衡直方图、 第三均衡直方图以及 第四均衡直方图的灰度级分别占相对应所述视频 数据中每帧图像的灰度级的比例； 依据所述比例将所述第一均衡直方图、 第二均衡直方图、 第三均衡直方图以及第 四均 衡直方图进行合并生成所述相对应的增强图像。 5.根据权利要求2所述的工地人员安全行为识别方法， 其特征在于， 所述依据 所述增强 图像中进行 灰度化生成相对应的灰度图像的步骤， 包括： 依据所述增强图像进行均衡化处 理生成相对应的均衡化图像； 依据所述均衡化图像进行 灰度化生成相对应的加权平均灰度图像； 依据所述加权平均灰度图像进行降噪生成相对应的灰度图像。 6.根据权利要求5所述的工地人员安全行为识别方法， 其特征在于， 所述依据 所述加权 平均灰度图像进行降噪生成相对应的灰度图像的步骤， 包括： 依据所述加权平均灰度图像进行 方差稳定性变化 生成相对应的含噪图像； 依据所述含噪图像生成相对应的第一含噪图像和相对应的第二含噪图像； 将所述第一含噪图像进行聚合并加入残差图生成相对应的聚合图像；权　利　要　求　书 1/2 页 2 CN 114998990 A 2依据所述第二含噪图像和所述聚合图像进行协同滤波生成相对应的灰度图像。 7.根据权利要求1所述的工地人员安全行为识别方法， 其特征在于， 所述依据 所述工作 人员的外部特征生成骨骼关键点的位置数据以及骨骼关键点之 间的连接信息数据的步骤， 包括： 依据所述工作人员的外部特征的灰度图像进行骨骼点卷积生成相对应的骨骼关键点 的位置数据； 依据所述工作人员的外部特征的灰度图像进行骨骼线卷积生成相对应的骨骼关键点 之间的连接信息数据。 8.一种工地人员安全行为识别装置， 所述装置用于对工地人员行为是否安全进行识 别， 其特征在于， 包括： 外部特征模块， 用于获取工作区域内工作人员视频数据， 并依据全卷积神经网络确定 所述视频 数据中所述工作人员的外 部特征； 连接信息数据模块， 用于依据 所述工作 人员的外部特征生成骨骼关键点的位置数据以 及骨骼关键点之间的连接信息数据； 骨骼信息模块， 用于依据所述工作人员的外部特征、 骨骼关键点的位置数据以及骨骼 关键点之间的连接信息数据生成相对应的工作人员的骨骼信息； 姿态特征模块， 用于依据所述工作人员的骨骼信息生成工作人员的姿态特 征； 安全结果模块， 用于依据 所述姿态特征生成所述工作人员的行为的安全结果； 其中， 所 述安全结果包括 安全和不 安全。 9.一种电子设备， 其特征在于， 包括处理器、 存储器及存储在所述存储器上并能够在所 述处理器上运行的计算机程序， 所述计算机程序被所述处理器执行时实现如权利要求 1至7 中任一项所述的工地人员安全行为识别方法的步骤。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质上存储计算机程 序， 所述计算机程序被处理器执行时实现如权利要求 1至7中任一项 所述的工地人员安全行 为识别方法的步骤。权　利　要　求　书 2/2 页 3 CN 114998990 A 3