(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210673807.6 (22)申请日 2022.06.14 (71)申请人 国网浙江省电力有限公司 地址 310007 浙江省杭州市黄龙路8号 申请人 国网浙江省电力有限公司湖州供电 公司　 浙江华云信息科技有限公司 (72)发明人 丁伟斌　金绍君　罗哲珺　潘军　 陈倩　金春兰　吴洁　陈思琪　 汤佳璐　 (74)专利代理 机构 杭州华鼎知识产权代理事务 所(普通合伙) 33217 专利代理师 沈俭因 (51)Int.Cl. G06V 20/52(2022.01)G06V 20/40(2022.01) G06V 40/10(2022.01) G06V 10/82(2022.01) G06T 7/73(2017.01) G06Q 10/10(2012.01) (54)发明名称 基于深度学习的业财数据处 理方法及系统 (57)摘要 本申请提供了一种基于深度学习的业财数 据处理方法及系统， 本申请通过通过监控系统获 取工作人员工作的视频数据； 提取视频数据中的 若干帧视频图像； 对视频图像进行预处理得到图 像序列； 通过预构建的深度目标检测模型对图像 序列中的人员目标和检修设备目标进行检测， 得 到人员目标身份信息、 设备编码信息以及人员轨 迹信息； 根据人员轨迹信息确定检修作业起止时 刻信息； 将人员目标身份信息、 设备编码信息以 及检修作业起止时刻信息生 成电子工作票。 本申 请全程无须工作人员干预， 不仅减 轻了工作人员 的负担， 而且提高了信息准确度， 数据为电子格 式， 更加方便后续系统提取和利用。 权利要求书2页 说明书6页 附图2页 CN 115171038 A 2022.10.11 CN 115171038 A 1.基于深度学习的业财 数据处理方法， 其特 征在于， 所述方法包括： 通过监控系统获取工作人员工作的视频 数据； 提取所述视频 数据中的若干帧视频图像； 对所述视频图像进行 预处理得到图像序列； 通过预构建的深度目标检测模型对所述图像序列中的人员目标和检修设备目标进行 检测， 得到人员目标身份信息、 设备编码信息以及人员轨 迹信息； 根据所述人员轨 迹信息确定检修作业 起止时刻信息； 将所述人员目标身份信息、 设备编码信息以及检修作业起止时刻信息生成电子工作 票。 2.根据权利要求1所述的基于深度学习的业财数据处理方法， 其特征在于， 所述通过监 控系统获取工作人员工作的视频 数据包括： 通过监控系统周期性获取工作人员工作的视频 数据。 3.根据权利要求1所述的基于深度学习的业财数据处理方法， 其特征在于， 所述对所述 视频图像进行 预处理得到图像序列包括： 对所述视频图像进行降噪增强处 理； 按照每个视频图像的标注时间进行排序得到图像序列。 4.根据权利要求1所述的基于深度学习的业财数据处理方法， 其特征在于， 所述通过预 构建的深度目标检测模型对所述图像序列中的人员目标和检修设备目标进 行检测， 得到人 员目标身份信息、 设备编码信息以及人员轨 迹信息包括： 将所述图像序列输入到预构建的深度目标检测模型中， 通过卷积层对所述图像序列依 次进行特征提取， 得到第一人员深度特 征、 第二人员深度特 征和设备深度特 征； 将所述第一人员深度特征和设备深度特征分别输入到目标检测网络中得到人员身份 信息和设备编码信息； 将所述第二人员深度特 征输入到目标跟踪网络得到人员轨 迹信息。 5.根据权利要求1所述的基于深度学习的业财数据处理方法， 其特征在于， 所述根据 所 述人员轨 迹信息确定检修作业 起止时刻信息包括： 将所述人员轨 迹信息中的第一帧图像的标注时刻确定为检修作业 开始时刻； 将所述人员轨 迹信息中的最后一帧图像的标注时刻确定为检修作业停止时刻。 6.根据权利要求1所述的基于深度学习的业财数据处理方法， 其特征在于， 所述将所述 人员目标身份信息、 设备编码信息以及检修作业 起止时刻信息生成电子 工作票包括： 获取电子 工作票模板； 将所述人员目标身份信 息、 设备编码信 息以及检修作业起止时刻信 息按照字段分别添 加到所述电子 工作票模板的相应位置； 填写完成后， 生成电子 工作票。 7.基于深度学习的业财 数据处理系统， 其特 征在于， 所述系统包括： 获取单元， 用于通过监控系统获取工作人员工作的视频 数据； 提取单元， 用于提取 所述视频 数据中的若干帧视频图像； 预处理单元， 用于对所述视频图像进行 预处理得到图像序列； 目标检测单元， 用于通过预构建的深度目标检测模型对所述图像序列中的人员目标和权　利　要　求　书 1/2 页 2 CN 115171038 A 2检修设备目标进行检测， 得到人员目标身份信息、 设备编码信息以及人员轨 迹信息； 确定单元， 用于根据所述人员轨 迹信息确定检修作业 起止时刻信息； 生成单元， 用于将所述人员目标身份信息、 设备编码信息以及检修作业起止时刻信息 生成电子 工作票。 8.根据权利要求7所述的基于深度学习的业财数据处理系统， 其特征在于， 所述目标检 测单元包括： 特征提取单元， 用于将所述图像序列输入到预构建的深度目标检测模型中， 通过卷积 层对所述图像序列依 次进行特征提取， 得到第一人员深度特征、 第二人员深度特征和设备 深度特征； 信息识别单元， 用于将所述第 一人员深度 特征和设备深度 特征分别输入到目标检测网 络中得到人员身份信息和设备编码信息； 轨迹跟踪单元， 用于将所述第二人员深度特征输入到目标跟踪网络得到人员轨迹信 息。权　利　要　求　书 2/2 页 3 CN 115171038 A 3