(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211230984.3 (22)申请日 2022.10.10 (71)申请人 广东电网有限责任公司中山供电局 地址 528405 广东省中山市东区博爱六路 68号 (72)发明人 林自强　李明　林韶文　梁广　 李华　吴金珠　毛焱　梁志祥　 赵晓宁　王泰然　周祥峰　黄伟豪　 王锦滨　朱余林　 (74)专利代理 机构 广州海心联合专利代理事务 所(普通合伙) 44295 专利代理师 冼俊鹏 (51)Int.Cl. G06V 20/52(2022.01) G06N 3/04(2006.01)G06N 3/08(2006.01) G06T 7/246(2017.01) G06V 10/44(2022.01) G06V 10/764(2022.01) G06V 10/82(2022.01) H04N 5/232(2006.01) H04N 7/18(2006.01) (54)发明名称 一种基于现场作业监控视频的多目标检测 与跟踪装置 (57)摘要 本发明涉及作业监控技术领域， 具体公开了 一种基于现场作业监控视频的多目标检测与跟 踪装置， 所述装置包括区域切分模块， 用于对三 维地图进行切分， 得到静止区和运动区； 连接建 立模块， 用于在静止区中确定固定端的安装参 数， 在运动区中确定移动端的安装参数， 并建立 移动端与固定端之间的连接关系； 视频识别模 块， 用于实时接收固定端获取到的监控视频， 对 监控视频进行识别， 定位待追踪目标； 运动指令 生成模块， 用于基于连接关系查询所述待追踪目 标对应的移动端， 生成运动指令并向移动端发 送。 本发明提供了一种 “上下级”式的信息获取架 构， 当某些设备出现问题时， 只需要简单的更换 即可， 便捷性极高。 权利要求书3页 说明书8页 附图2页 CN 115294534 A 2022.11.04 CN 115294534 A 1.一种基于现场作业 监控视频的多目标检测与跟踪装置， 其特 征在于， 所述装置包括： 三维地图建立模块， 用于根据预设的采集网格采集工作区域的尺寸信息， 建立三维地 图； 区域切分模块， 用于在所述三维地图中标记工作位置， 基于工作位置对三维地图进行 切分， 得到静止区和运动区； 连接建立模块， 用于在静止区中确定固定端的安装参数， 在运动 区中确定移动端的安 装参数， 并建立移动端与固定端之间的连接关系； 视频识别模块， 用于实时接收固定端获取到的监控视频， 对监控视频进行识别， 定位待 追踪目标； 运动指令生成模块， 用于基于连接关系查询所述待追踪目标对应的移动端， 生成运动 指令并向移动端发送。 2.根据权利要求1所述的基于现场作业监控视频的多目标检测与跟踪装置， 其特征在 于， 所述三维地图建立模块包括： 网格查询单元， 用于获取工作区域的平面地图， 接收用户输入的颗粒度， 根据所述颗粒 度在预设的网格表中查询采集网格； 路径确定单元， 用于根据所述采集网格确定检测点及检测路径； 所述检测点在所述检 测路径中； 海拔获取 单元， 用于基于所述检测路径实时获取工作区域在检测点处的高度； 点位拟合单元， 用于点位拟合单元， 用于根据 所述高度在平面地图中确定表面点， 拟合 所述表面 点， 得到三维地图。 3.根据权利要求1所述的基于现场作业监控视频的多目标检测与跟踪装置， 其特征在 于， 所述区域切分模块包括： 位置确定单 元， 用于显示三维地图， 接收用户输入的标记信息， 确定 工作位置； 静止区确定单元， 用于以工作位置为中心， 预设的数值为半径在三维地图中确定静止 区； 运动区确定单元， 用于在三维地图中确定所述静止区的补集， 在所述补集中确定运动 区； 执行单元， 用于对所述静止区和运动区进行编号。 4.根据权利要求3所述的基于现场作业监控视频的多目标检测与跟踪装置， 其特征在 于， 所述执 行单元包括： 第一编号子单 元， 用于根据预设的遍历规则依次对所述静止区进行编号； 第二编号子单元， 用于依次以静止区为中心， 查询与静止区相连的运动区， 基于所述静 止区的编号对运动区进行编号； 编号调整子单元， 用于实时接收用户输入的调整信息， 调整所述静止区和所述运动 区 的编号。 5.根据权利要求1所述的基于现场作业监控视频的多目标检测与跟踪装置， 其特征在 于， 所述连接建立模块包括： 主体确定单 元， 用于在预设的排班 表中获取静止区的工作主体； 固定端选取单元， 用于基于所述工作主体选取含有清晰度函数的固定端； 所述清晰度权　利　要　求　书 1/3 页 2 CN 115294534 A 2函数的自变量 为距离， 因变量 为清晰度； 距离计算单元， 用于接收用户输入的清晰度阈值， 将所述清晰度阈值输入所述清晰度 函数， 得到距离； 范围确定单元， 用于根据所述距离在三维地图中确定安装范围； 所述安装范围为三维 范围； 参数确定单元， 用于在所述安装范围内确定固定端的安装参数； 所述安装参数包括安 装位置和安装角度。 6.根据权利要求5所述的基于现场作业监控视频的多目标检测与跟踪装置， 其特征在 于， 所述参数确定单 元包括： 音频获取子单 元， 用于实时获取并记录音频信息； 音频拟合子单 元， 用于拟合记录的音频信息， 得到拟合曲线； 特征提取子单元， 用于将所述拟合曲线输入训练好的周期识别模型， 得到周期特征； 所 述周期特 征用于表征幅值变化 规律； 激活子单元， 用于基于周期特征确定固定端的激活特征； 所述激活特征为关于时间信 息的激活级别； 所述激活级别用于表征固定端的性能参数。 7.根据权利要求6所述的基于现场作业监控视频的多目标检测与跟踪装置， 其特征在 于， 所述拟合记录的音频信息， 得到拟合曲线的内容包括： 读取记录的音频信息， 根据预设的拟合 步长将音频信息切分为相连的特 征段； 依次计算所述特 征段的均值， 基于计算出的均值拟合音频曲线； 计算音频曲线的导线曲线， 在导数曲线中截取小于预设的导数阈值的波段； 重复上述内容 直至截取到的波段的长度小于预设的长度阈值。 8.根据权利要求5所述的基于现场作业监控视频的多目标检测与跟踪装置， 其特征在 于， 所述连接建立模块还 包括： 区间切分单元， 用于切分获取移动端的工作区间， 根据工作区间对运动区进行切分； 所 述工作区间用于表征移动端的最佳工作范围， 所述最佳工作范围由移动端的额定参数确 定； 移动端确定单 元， 用于根据切分结果确定移动端的数量及 初始位置； 参数读取单元， 用于读取所述运动 区的编号， 根据所述编号查询对应的静止区及其固 定端的安装参数； 视频内容标记单元， 用于根据运动区与静止区的位置关系以及固定端的安装参数在固 定端获取到的监控视频中标记与该运动区相连的子区域。 9.根据权利要求8所述的基于现场作业监控视频的多目标检测与跟踪装置， 其特征在 于， 所述视频识别模块包括： 重合率计算单元， 用于实时接收固定端获取到的监控视频， 依次计算相邻帧图像的重 合率； 图像拷贝单元， 用于当所述重合率低于预设条件时， 拷贝相应帧图像， 插入与监控视频 对应的图像队列； 其中， 图像队列中的图像含有时间信息； 识别定位单 元， 用于依次对所述图像队列中的图像进行识别， 定位目标区域； 异常率计算单 元， 用于根据训练好的神经网络模型对目标区域进行识别， 生成异常率；权　利　要　求　书 2/3 页 3 CN 115294534 A 3