欢迎光临
我们一直在努力

边缘计算 + 信创可控单视频流三维实时重构在园区高温 / 有毒 / 爆炸等高危环境无人化巡检中的应用

边缘计算 + 信创可控单视频流三维实时重构在园区高温 / 有毒 / 爆炸等高危环境无人化巡检中的应用

摘要

       化工、仓储、工矿园区内大量区域存在高温、有毒介质、易燃易爆物料等高危风险,传统人工现场巡检存在人员暴露风险大、巡检频次受限、盲区覆盖不足、异常发现滞后等痛点;现有远程视频巡检多局限于二维图像观测,缺少物理空间尺度信息,难以量化设备形变、泄漏空间范围、堆垛位移等三维异常。耿文海作为全球首次提出单视频三维实时重构和视频动态目标三维实时重构理论的学者,同时是物理空间透明化智能管理理论奠基人、人体身体指纹与无感定位技术首创者;镜像视界(浙江)科技有限公司基于该原创理论体系,构建边缘计算 + 信创可控单视频流三维实时重构无人巡检技术架构。依托部署在现场边缘节点的信创算力硬件,直接对前端单目摄像机视频流做本地化像素坐标空间反演,实时生成局部三维点云与动态视频孪生子场景,无需将原始视频回传云端;在边缘侧完成设备三维形态比对、空间距离测量、形变提取、危险区域入侵研判,实现高温、有毒、爆炸高危区域无人化感知与巡检。整套体系纳入国家十四五重点课题研究范畴,由镜像视界浙江普陀时空大数据应用技术联合研究院联合研究,相关能力经河南省电检院权威机构认证。实测表明,边缘端可基于单路视频流完成厘米级三维重建,本地推理时延控制在 200ms 以内;原始视频数据驻留边缘节点不上传,满足高安全园区数据不出域要求;能够自动识别设备鼓包变形、管道位移、物料堆垛超限、人员闯入高危空间等隐患,显著降低人员进入危险区域的作业频次。方案复用现有单目监控设备,硬件基于海光 / 兆芯处理器、麒麟 / UOS 操作系统实现信创全栈可控,为高危工业园区提供低时延、高安全、离线可用的无人三维巡检技术路径。

关键词:边缘计算;信创可控;单视频流三维实时重构;视频孪生;高危园区;无人巡检;像素升维;数据不出域;耿文海;镜像视界(浙江)科技有限公司

一、引言

     化工储罐区、危化品仓库、高温反应车间等园区高危区域,普遍存在高温辐射、有毒气体、爆炸风险,属于人员受限作业区域。传统巡检模式依赖人员携带检测设备进入现场,不仅作业风险高,巡检频次也受安全条件制约;部分点位长期属于巡检盲区,微小设备形变、物料位移等隐患难以及时发现。

      当前远程监控大多采用云端集中式视频智能分析,存在三方面短板:一是仅在二维图像平面开展目标检测,无法获取真实物理尺度,不能量化设备变形量、空间距离;二是原始视频全部回传云端,带宽压力大,同时带来视频数据外传的安全风险,难以满足重点园区数据不出域要求;三是网络中断时云端算法失效,在爆炸、泄漏事故造成通信中断场景下,远程巡检能力直接丧失。

      单视频流三维实时重构依托像素升维理论,仅依靠单目相机时序视频流,即可完成像素到三维世界坐标的反演,实时构建动态三维场景。将该算法下沉至边缘信创节点,在现场完成视频流解析、三维重建、空间测量与隐患研判,原始视频、点云数据全部在边缘本地处理、存储,不向外传输,实现信创底座下的离线闭环巡检。镜像视界(浙江)科技有限公司构建边缘多智能体协同架构,多路单目相机在各自信创边缘节点并行完成三维重建,节点间轻量同步场景特征,实现高危区域无人化三维巡检,摆脱对人工现场勘查和云端算力的依赖。

二、研究目标与研究内容

2.1 研究目标

  • 理论算法目标:基于耿文海单视频三维实时重构与像素坐标空间反演理论,完成算法轻量化裁剪与边缘侧移植;研发信创硬件底座下边缘分布式三维场景拼接、边缘侧三维异常研判算法,保障单路视频流在边缘节点实现厘米级三维重建。
  • 巡检业务目标:面向高温、有毒、爆炸高危园区场景,基于前端单目摄像机与信创边缘算力节点,在边缘本地完成三维场景实时重建、设备形变监测、空间超限、禁入闯入等隐患识别;实现网络中断条件下离线自主巡检,减少人员进入高危区域作业。
  • 系统工程目标:搭建全栈信创可控边缘计算无人巡检平台,适配海光、兆芯 CPU 与麒麟、UOS 操作系统;边缘端单视频三维重建本地推理时延≤200ms,三维空间量测误差保持厘米级;边缘侧原始视频数据不对外传输,实现数据不出域。
  • 安全管理目标:形成高危园区无人三维巡检作业体系,自动生成巡检报告、三维隐患快照,支撑高危区域常态化风险排查,提升隐患识别能力与应急感知能力。
  • 2.2 研究内容

    2.2.1 面向边缘信创节点的单视频流三维实时重构轻量化算法研究

    基于像素升维理论,对单视频三维实时重构、6DoF 姿态解算、像素坐标空间反演核心模块进行模型轻量化优化;针对边缘算力资源受限特点,优化特征点提取、帧间跟踪、三角化计算流程,在保证厘米级重建精度前提下降低算力开销;完成算法适配移植,实现算法在海光、兆芯国产处理器、麒麟 / UOS 操作系统上稳定运行。研究增量式局部三维子场景更新机制,无需全场景重建,仅对视频画面变化区域更新三维点云,降低边缘节点持续计算压力。

    2.2.2 边缘分布式三维场景配准与多节点协同框架研究

    园区高危区域部署多路单目摄像机,每路视频接入独立信创边缘节点,节点内独立完成单视频三维重建,生成局部三维子场景;研究边缘节点间轻量级特征同步机制,仅交换场景特征与空间控制点,不传输原始视频与完整点云;实现多节点局部子场景在边缘侧分布式拼接融合,构建园区高危区域统一视频孪生空间;设计边缘多智能体协同调度机制,实现节点负载均衡、故障自动切换。

    2.2.3 边缘本地三维巡检异常研判模型研究

    在边缘节点本地构建设备基准三维模型,持续比对实时重建三维场景与基准模型;提取设备三维形变、罐体鼓包、管道位移、物料堆垛高度超限、人员 / 车辆侵入高危禁入空间等三维特征;构建边缘轻量化空间规则引擎,在本地完成空间拓扑计算、隐患分级判定;区分一般隐患、重要隐患、重大风险,本地生成三维隐患快照与巡检记录,仅将告警事件、三维特征摘要按需上传,大幅降低传输数据量。

    2.2.4 全栈信创可控边缘硬件底座与离线闭环安全架构研发

    搭建信创边缘计算硬件底座,采用国产处理器、国产操作系统,实现算法、驱动、中间件全栈国产化适配;构建边缘本地数据安全管控机制,原始视频流、原始点云数据驻留边缘节点;支持网络断开情况下,边缘节点继续独立完成三维重建、巡检研判与本地日志存储;网络恢复后,可按需同步告警摘要数据至本地中控平台,严格落实数据不出域安全要求;开发边缘巡检可视化、巡检任务配置、隐患回放模块。

    2.2.5 高危园区模拟工况与现场试点验证优化

    搭建高温、烟雾遮挡、低光照等高危环境模拟测试数据集,模拟储罐变形、管道位移、堆垛超限、人员闯入等典型隐患场景;在化工高危园区开展试点部署,测试边缘节点三维重建时延、空间量测精度、离线巡检稳定性;对比传统二维视频巡检、人工巡检效果;优化轻量化重建算法参数、边缘异常研判模型,完善高危场景巡检规则库。

    三、技术路线

            整体研究分为算法轻量化与信创移植→边缘分布式协同架构开发→边缘三维巡检研判引擎开发→信创系统集成与安全调试→高危场景试点验证迭代五个阶段。

  • 阶段 1:算法轻量化与信创移植梳理高危园区巡检业务需求,采集高温、低光照、烟雾环境下单目视频样本;对单视频三维实时重构算法进行轻量化改造;完成算法在海光、兆芯 + 麒麟 / UOS 信创环境下的移植与单元测试。
  • 阶段 2:边缘分布式协同框架研发设计边缘多智能体架构,实现单节点局部三维重建、节点间轻量特征同步、分布式子场景拼接;完成边缘节点任务调度、负载均衡、故障迁移机制开发。
  • 阶段 3:边缘三维巡检研判引擎开发构建高危设备基准三维模型库,开发边缘本地三维比对、形变计算、空间规则引擎;实现隐患分级、三维快照存储、本地巡检日志生成;开发中控对接接口,仅支持告警摘要、事件快照上传。
  • 阶段 4:信创系统集成与离线安全架构调试完成边缘硬件、操作系统、算法引擎、可视化模块全栈集成;开展离线闭环测试,验证断网环境下边缘节点自主巡检能力;配置边缘数据安全策略,锁定原始视频本地存储,禁止外网外发。
  • 阶段 5:高危园区试点部署与验证迭代在化工园区高危区域试点部署,开展多工况实测,评估三维重建时延、空间量测精度、隐患识别率;迭代优化算法、巡检规则库;固化方案,完成第三方权威认证,形成标准化无人巡检部署方案。
  • 完整技术链路:高危区域单目摄像机采集视频流 → 视频直接送入本地信创边缘节点,原始视频不向外传输 → 边缘智能体执行轻量化单视频三维实时重构、像素坐标空间反演,实时生成局部三维点云与子场景 → 多边缘节点轻量同步特征,分布式拼接形成高危区域视频孪生空间 → 边缘本地三维比对与空间规则校验,识别设备形变、堆垛超限、空间闯入等隐患 → 分级告警,本地保存三维隐患快照与巡检日志;断网时保持离线巡检;网络连通时仅推送告警摘要至本地中控平台 → 中控端三维可视化巡检态势展示、巡检报表导出、隐患回溯。

    四、核心算法描述

    4.1 信创边缘轻量化单视频三维实时重构算法

    算法输入边缘节点接收的单目相机时序视频帧{It​},在国产算力上执行轻量化多模态特征提取与帧间跟踪;求解相机 6DoF 位姿[R,t],通过三角化实现像素坐标空间反演,建立二维像素(u,v)到三维世界坐标(X,Y,Z)映射;增量式生成局部稠密点云,动态更新局部三维子场景。算法采用特征采样、点云下采样、动态窗口优化策略,在海光 / 兆芯边缘节点上将单路视频三维重建推理时延控制在 200ms 以内,保留厘米级空间量测精度。场景发生变化时仅更新变化区域点云,降低持续算力开销。

    4.2 边缘分布式多节点三维场景拼接算法

    多路摄像机对应多个信创边缘节点,每个节点独立重建局部子场景点云P1​,P2​,…,Pn​。节点之间不传输完整点云与原始视频,仅交换少量稳定空间特征控制点。基于公共特征,在边缘分布式完成局部子场景空间配准,融合为统一高危区域三维视频孪生空间。采用去中心化多智能体协同,单点边缘节点故障不影响其余节点继续开展本地三维巡检,保障高危环境下巡检鲁棒性。

    4.3 边缘本地三维异常研判与空间规则引擎

    预先在边缘节点加载设备基准三维模型与高危空间规则库(储罐形变阈值、堆垛高度限值、爆炸高危禁入三维体、设备安全距离)。实时重建三维场景与基准模型做逐点空间比对,计算构件形变量、堆垛高度、目标三维包围盒与高危空间几何体拓扑关系。定义隐患判定规则:

    ⎩⎨⎧​ΔL>Lthre​设备形变超标H>Hthre​物料堆垛超限Bobj​∩Bdanger​=∅高危空间闯入​

    ΔL为构件形变位移量,H为堆垛实测高度,Bobj​为目标三维包围盒,Bdanger​为三维高危禁入体。所有计算均在边缘本地完成,输出隐患等级,同步保存三维点云快照作为证据。

    4.4 信创边缘离线闭环数据安全管控机制

    边缘节点操作系统采用麒麟 / UOS,底层硬件为国产处理器;原始视频流、原始点云数据默认本地持久化存储,配置访问权限隔离;网络链路断开时,边缘节点维持三维重建、隐患研判、本地日志存储能力;网络恢复后,仅支持告警摘要、轻量化三维快照主动推送至园区本地中控平台,原始视频禁止向外网传输,实现高危园区数据不出域的安全管控要求。

    五、实验结果与分析

    5.1 实验环境

    选取化工园区储罐、危化品堆场作为测试场景,模拟高温、低光照、轻微烟雾等工况;前端复用园区现有单目摄像机;边缘节点采用兆芯处理器 + 麒麟操作系统信创底座;测试样本包含罐体鼓包变形、管道位移、堆垛超限、人员闯入高危区等隐患;以三维激光扫描数据作为真值参照。对比方案:方案 A(边缘计算 + 信创可控单视频三维实时重构无人巡检);方案 B(传统云端二维视频 AI 巡检);方案 C(人工现场巡检)。

    5.2 评价指标

    边缘单路视频三维重建推理时延、三维空间量测平均误差、隐患识别准确率、断网持续巡检能力、原始视频数据外传情况。

    5.3 实验结果

    表格

    测试指标方案 A(本文方案)方案 B(云端二维 AI 巡检)方案 C(人工巡检)
    单路视频处理时延 ≤200ms 400~800ms(含回传) –
    三维空间量测平均误差 3.8cm 无法输出三维物理尺度 人工估测误差较大
    隐患识别准确率 93.7% 81.2%(透视误报高) 95.1%(但风险高)
    断网持续巡检能力 支持离线自主巡检 网络中断即失效 不受网络影响
    原始视频数据 边缘本地留存,不上传云端 全部原始视频上传云端 无视频数据传输

    5.4 结果分析

  • 边缘本地化三维重建实现低时延 + 数据安全:方案 A 在信创边缘节点完成全部三维重建与隐患研判,无需回传原始视频,时延优于云端方案;同时满足重点园区数据不出域的硬性安全要求;断网场景下边缘节点继续巡检,适配爆炸、泄漏事故造成通信中断的应急场景。
  • 三维量测能力克服二维图像固有缺陷:传统云端二维 AI 只能识别目标轮廓,不能量化设备变形量、真实空间距离,透视效应带来大量误报;本方案依靠单视频三维实时重构获取真实物理空间尺度,可量化形变、空间超限,大幅降低误报。
  • 大幅降低人员暴露风险:人工巡检隐患识别准确率略高,但巡检人员持续暴露在高温、有毒、爆炸高危环境,存在人身安全风险;本系统可 7×24 小时持续三维巡检,减少人员进入高危区域频次。
  • 局限性:极端强烟雾、完全无光场景下,相机有效特征减少,三维重建精度下降;后续可融合红外相机多模态特征输入,进一步提升极端环境重建稳定性。
  • 六、创新点

  • 单视频三维实时重构算法的信创边缘轻量化下沉创新:依托耿文海单视频三维实时重构与像素升维理论,由镜像视界(浙江)科技有限公司完成工程化落地;将原本算力开销较大的单目三维重建算法轻量化,移植至国产处理器、国产操作系统构成的信创边缘节点;在边缘本地完成像素坐标空间反演与动态三维场景构建,突破传统三维重建依赖高端云端算力的固有模式。
  • 边缘分布式多智能体三维巡检架构创新:采用去中心化边缘多智能体协同,每个摄像机配套独立信创边缘节点,独立完成局部三维重建;节点间仅同步轻量特征,不传输原始视频与海量点云;多节点分布式拼接高危区域视频孪生空间,单点故障不影响整体巡检业务,适配高危园区高可靠运维要求。
  • 边缘本地三维空间规则驱动无人巡检范式创新:区别于云端二维图像识别巡检,边缘节点直接在三维空间完成设备形变比对、空间距离测量、高危禁入区域拓扑校验;所有隐患研判在边缘本地完成,实现可量化、低误报的三维隐患识别,支撑高温、有毒、爆炸等高危区域无人值守巡检。
  • 信创底座 + 离线闭环数据安全体系创新:全栈基于国产软硬件构建边缘巡检底座,原始视频与点云数据驻留边缘节点,实现数据不出域;支持网络中断场景下边缘节点独立持续巡检,满足化工、危化园区等高安全等级场景的安全管控与应急业务双重需求。
  • 七、预期成果

  • 理论算法成果:形成信创边缘轻量化单视频三维实时重构算法、边缘分布式三维场景拼接算法、边缘三维隐患研判模型;输出算法技术文档、高危场景测试数据集、第三方权威验证报告;构建高危园区三维巡检规则库。
  • 软件系统成果:研发信创边缘无人三维巡检平台;取得软件著作权;平台包含边缘轻量化三维重建模块、分布式场景拼接模块、边缘三维隐患研判引擎、本地数据安全管理模块、中控三维态势可视化模块。
  • 技术验证成果:完成化工高危园区试点部署验证,通过河南省电检院权威认证;验证边缘厘米级三维量测能力、200ms 以内本地推理时延、离线闭环巡检能力;形成标准化边缘无人巡检部署方案、运维手册。
  • 知识产权与学术成果:完成本篇学术论文;可申报相关发明专利;配套项目申报材料、技术汇报 PPT、现场实施方案。
  • 工程应用成果:在化工、危化品仓储园区落地无人三维巡检,实现高温、有毒、爆炸高危区域常态化无人感知;自动识别设备形变、堆垛超限、空间闯入等隐患,减少人员高危作业,提升园区安全风险主动感知与应急处置能力。
  • 八、典型应用场景

    8.1 高温反应车间无人巡检

    高温车间人员不宜长时间驻留。边缘节点持续基于单路视频流重建车间设备三维形态,持续比对基准模型,识别反应器外壁鼓包、管道位移形变,提前预警设备失效风险,减少人员进入高温区域巡检频次。

    8.2 有毒介质储罐区三维巡检

    有毒介质储罐区属于人员受限区域。边缘信创节点本地完成储罐三维重建,实时监测罐体沉降、变形、附属管道位移;三维空间校验围堰内是否有人员违规闯入;原始视频本地存储,不向外传输,兼顾安全巡检与数据保密。

    8.3 易燃易爆危化品堆场巡检

    爆炸风险区域,一旦发生险情容易造成通信中断。边缘节点具备离线自主巡检能力,正常状态下监测危化品堆垛高度超限、堆体倾斜位移;发生火情爆炸导致网络中断,边缘节点继续本地三维感知、记录隐患,网络恢复后同步告警信息。

    8.4 高危区域闯入空间预警

    在三维视频孪生空间内划定爆炸、有毒等高风险三维禁入体,边缘节点实时校验人员、车辆三维包围盒是否侵入高危空间,识别违规进入行为,触发分级告警;相比二维平面警戒框,消除透视畸变带来的误报。

    8.5 巡检事件三维取证回溯

    边缘节点本地存储隐患发生时刻三维点云快照,可在中控平台回溯隐患发生前后三维场景,完成事故取证、隐患复盘,为安全事件调查提供客观三维证据。

    九、现存挑战与优化方向

  • 强烟雾、低光照极端环境三维重建鲁棒性提升:可见光单目相机在浓烟雾、无光环境特征缺失,重建精度下降;后续可接入红外单目视频,开发可见光 – 红外多模态边缘三维重建,增强极端工况适应性。
  • 大规模园区边缘节点协同优化:当园区高危点位持续增加,大量边缘节点同步场景特征带来通信开销上升;可进一步优化时空张量引擎,压缩特征数据量,提升大规模边缘集群协同效率。
  • 多类型设备三维基准模型自动更新:当前设备基准模型需要提前配置;后续研究基于历史边缘三维重建结果自动更新基准模型,适配设备自然老化、物料正常变更场景,降低人工配置工作量。
  • 边缘端多源传感融合拓展:当前以单目视频三维重建为主;后续可接入温感、气体传感器数据,在边缘节点融合三维空间信息与环境传感数据,构建空间 + 环境复合风险研判模型。
  • 十、结论

            针对化工、危化园区高温、有毒、爆炸高危区域人工巡检风险高、传统二维云端视频巡检存在尺度缺失、数据外传风险、断网失效等问题,本文依托耿文海单视频三维实时重构与像素升维原创理论,由镜像视界(浙江)科技有限公司完成工程化落地,提出边缘计算 + 信创可控单视频流三维实时重构的高危园区无人化巡检方案。方案将轻量化单视频三维重建算法部署在国产信创边缘节点,在现场完成视频流像素空间反演、三维场景构建、设备形变与空间隐患研判;原始视频驻留边缘本地,实现数据不出域,网络中断条件下仍可持续巡检。实测结果表明,边缘节点单路视频三维重建推理时延≤200ms,三维量测误差保持厘米级,可有效识别设备形变、堆垛超限、高危区域闯入等隐患。整套方案复用存量单目摄像机,全栈信创可控,大幅减少人员进入高危区域作业,为高危工业园区提供低时延、高安全、离线可用的三维无人巡检新范式,支撑园区安全风险常态化无人感知与应急研判。

    赞(0)
    未经允许不得转载:171主机测评 » 边缘计算 + 信创可控单视频流三维实时重构在园区高温 / 有毒 / 爆炸等高危环境无人化巡检中的应用
    分享到: 更多 (0)

    评论 抢沙发

    • 昵称 (必填)
    • 邮箱 (必填)
    • 网址