(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210806353.5 (22)申请日 2022.07.08 (71)申请人 中国铁道科 学研究院集团有限公司 地址 100081 北京市海淀区大柳树路2号 申请人 中国铁道科 学研究院集团有限公司 电子计算技术研究所 　 北京经纬信息技 术有限公司 (72)发明人 彭凯贝　王小书　吕晓军　史天运　 李樊　李宏　史雅静　李君　 伍柳伊　赵晖　杨帆　薛昊　 (74)专利代理 机构 北京路浩知识产权代理有限 公司 11002 专利代理师 梁军丽 (51)Int.Cl. H04N 7/18(2006.01)H04N 5/265(2006.01) G08B 5/36(2006.01) G08B 5/38(2006.01) G08B 3/10(2006.01) (54)发明名称 融合音视频的客运车站安全监测方法及装 置 (57)摘要 本发明提供一种融合音视频的客运车站安 全监测方法及装置， 涉及客运车站安全管理技术 领域， 该方法包括： 响应于接收到客运车站的安 全状态报警信息， 根据安全状态报警信息确定安 全事件发生区域的多个目标摄像头和客运车站 数字孪生体上的目标监控区； 获取设定时间段内 多个目标摄像头的报警音视频数据， 设定时间段 基于安全状态报警信息指示的报警时间点确定； 将多个目标摄像头的报警音视频数据在客运车 站数字孪生体中融合， 得到客运车站数字孪生体 上的安全监测实景融合动图数据； 在目标监控区 显示安全监测实景融合动图数据。 本发明提供的 技术方案可以降低客运车站安全监测时工作人 员的盯控强度， 提高客运车站安全监测的便捷性 和效率。 权利要求书2页 说明书12页 附图3页 CN 115278168 A 2022.11.01 CN 115278168 A 1.一种融合音视频的客 运车站安全监测方法， 其特 征在于， 包括： 响应于接收到客运车站的安全状态报 警信息， 根据所述安全状态报 警信息确定安全事 件发生区域的多个目标摄 像头和客 运车站数字 孪生体上的目标监控区； 获取设定时间段内所述多个目标摄像头的报 警音视频数据， 所述设定时间段基于所述 安全状态报警信息指示的报警时间点确定； 将所述多个目标摄像头的报 警音视频数据在所述客运车站数字孪生体中融合， 得到所 述客运车站数字 孪生体上的安全监测实景融合动图数据； 在所述目标监控区显示所述 安全监测实景融合动图数据。 2.根据权利要求1所述的融合音视频的客运车站安全监测方法， 其特征在于， 所述安全 监测实景融合动图数据包括安全监测实景视频图像和安全监测音频数据； 所述将所述多个 目标摄像头的报警音视频数据在所述客运车站数字孪生体中融合， 得到所述客运车站数字 孪生体上的安全监测实景融合动图数据， 包括： 从所述报警音视频 数据中获取 各所述目标摄 像头在同一时刻的报警视频帧图像； 基于所述目标摄像头的位置信 息对所述同一 时刻的报 警视频帧图像进行融合拼接， 并 将融合拼接结果在所述目标监控区与所述客运车站数字孪生体融合， 得到所述客运车站数 字孪生体上的所述 安全监测实景视频图像； 从所述报 警音视频数据中分离出各所述目标摄像头对应的报 警音频数据， 并生成所述 报警音频 数据对应的音频播 放控件； 将所述音频播放控件与对应的报 警音频数据关联， 并将关联后的音频播放控件与 所述 客运车站数字孪生体在所述目标监控区融合， 得到所述客运车站数字孪生体上的所述安全 监测音频 数据。 3.根据权利要求2所述的融合音视频的客运车站安全监测方法， 其特征在于， 所述在所 述目标监控区显示所述 安全监测实景融合动图数据包括： 基于所述目标摄 像头的位置信息在所述目标监控区显示所述 安全监测实景视频图像； 在所述目标监控区中各目标孪生摄像头的指定位置显示各所述目标孪生摄像头对应 的所述音频播放控件， 所述音频播放控件用于播放关联的报警音频数据， 所述目标孪生摄 像头为所述目标摄 像头在所述 客运车站数字 孪生体上的映射。 4.根据权利要求1至3任一项所述的融合音视频的客运车站安全监测方法， 其特征在 于， 所述安全状态报警信息中包括报警点位置信息； 所述基于所述安全状态报警信息确定 安全事件发生区域的多个目标摄 像头和客 运车站数字 孪生体上的目标监控区包括： 基于所述报警点位置信息确定安全事件发生区域在客运车站数字孪生体上的目标监 控区； 获取所述目标监控区中的所有孪生摄像头距所述报警点位置信息所指示的报警点位 置的距离； 对所述距离进行从小到大的排序， 并将排序 结果中的前预设数量个距离对应的孪生摄 像头确定为目标孪生摄 像头； 将客运车站内与所述目标孪生摄 像头相映射的摄 像头确定为目标摄 像头。 5.根据权利要求1至3任一项所述的融合音视频的客运车站安全监测方法， 其特征在 于， 所述获取设定时间段内所述多个目标摄 像头的报警音视频 数据包括：权　利　要　求　书 1/2 页 2 CN 115278168 A 2获取所述安全状态报警信息指示的报警时间点； 获取所述报警时间点前第一预设时间段内及所述报警时间点后第二预设时间段内所 述目标摄 像头的报警音视频 数据。 6.根据权利要求1至3任一项所述的融合音视频的客运车站安全监测方法， 其特征在 于， 还包括： 响应于接收到所述安全状态报 警信息， 向巡检人员的巡检终端设备发送安全事件处置 消息， 所述 安全事件处置消息指示所述 安全事件发生区域的位置； 响应于接收到所述巡检终端设备发送的所述巡检人员到达所述安全事件发生区域的 位置的确认消息， 确定所述巡检人员到达所述安全事件发生区域的位置的时间， 得到安全 事件处置时间； 基于所述 安全事件处置时间获取 所述多个目标摄 像头的安全 事件处置音视频 数据； 保存所述 安全事件处置音视频 数据。 7.根据权利要求6所述的融合音视频的客运车站安全监测方法， 其特征在于， 在所述基 于所述安全事件处置时间获取所述多个目标摄像头的安全事件处置音视频数据之后， 所述 方法还包括： 将所述安全事件处置音视频数据在所述客运车站数字孪生体中融合， 得到安全事件处 置实景融合动图数据； 在所述目标监控区显示所述 安全事件处置实景融合动图数据。 8.根据权利要求1至3任一项所述的融合音视频的客运车站安全监测方法， 其特征在 于， 所述方法还 包括： 获取客运车站内除所述目标摄像头以外的所有非目标摄像头在所述报警时间点的视 频帧图像； 对所述视频帧图像进行融合 拼接， 得到待处 理监测图像； 基于所述报警时间点将所述待处理监测图像与所述报警音视频数据在所述客运车站 数字孪生体中的融合结果进行融合， 得到所述客运车站数字孪生体上的客运车站全站安全 监测实景融合动图数据。 9.根据权利要求8所述的融合音视频的客运车站安全监测方法， 其特征在于， 所述方法 还包括： 将所述客运车站全站安全监测实景融合动图数据沿设定的客运车站数字孪生体展开 角度展开 为一张平面图， 并保存所述平面图； 或者， 将所述 客运车站全站安全监测实景融合动图数据按照三维图格式保存。 10.一种融合音视频的客 运车站安全监测装置， 其特 征在于， 包括： 确定模块， 用于响应于接收到客运车站 的安全状态报警信息， 根据所述安全状态报警 信息确定安全 事件发生区域的多个目标摄 像头和客 运车站数字 孪生体上的目标监控区； 获取模块， 用于获取设定时间段内所述多个目标摄像头的报警音视频数据， 所述设定 时间段基于所述 安全状态报警信息指示的报警时间点确定； 融合模块， 用于将所述多个目标摄像头的报 警音视频数据在所述客运车站数字孪生体 中融合， 得到所述 客运车站数字 孪生体上的安全监测实景融合动图数据； 显示模块， 用于在所述目标监控区显示所述 安全监测实景融合动图数据。权　利　要　求　书 2/2 页 3 CN 115278168 A 3