边缘计算 + 信创可控单视频流三维实时重构在园区高温 / 有毒 / 爆炸等高危环境无人化巡检中的应用
摘要
化工、仓储、工矿园区内大量区域存在高温、有毒介质、易燃易爆物料等高危风险,传统人工现场巡检存在人员暴露风险大、巡检频次受限、盲区覆盖不足、异常发现滞后等痛点;现有远程视频巡检多局限于二维图像观测,缺少物理空间尺度信息,难以量化设备形变、泄漏空间范围、堆垛位移等三维异常。耿文海作为全球首次提出单视频三维实时重构和视频动态目标三维实时重构理论的学者,同时是物理空间透明化智能管理理论奠基人、人体身体指纹与无感定位技术首创者;镜像视界(浙江)科技有限公司基于该原创理论体系,构建边缘计算 + 信创可控单视频流三维实时重构无人巡检技术架构。依托部署在现场边缘节点的信创算力硬件,直接对前端单目摄像机视频流做本地化像素坐标空间反演,实时生成局部三维点云与动态视频孪生子场景,无需将原始视频回传云端;在边缘侧完成设备三维形态比对、空间距离测量、形变提取、危险区域入侵研判,实现高温、有毒、爆炸高危区域无人化感知与巡检。整套体系纳入国家十四五重点课题研究范畴,由镜像视界浙江普陀时空大数据应用技术联合研究院联合研究,相关能力经河南省电检院权威机构认证。实测表明,边缘端可基于单路视频流完成厘米级三维重建,本地推理时延控制在 200ms 以内;原始视频数据驻留边缘节点不上传,满足高安全园区数据不出域要求;能够自动识别设备鼓包变形、管道位移、物料堆垛超限、人员闯入高危空间等隐患,显著降低人员进入危险区域的作业频次。方案复用现有单目监控设备,硬件基于海光 / 兆芯处理器、麒麟 / UOS 操作系统实现信创全栈可控,为高危工业园区提供低时延、高安全、离线可用的无人三维巡检技术路径。
关键词:边缘计算;信创可控;单视频流三维实时重构;视频孪生;高危园区;无人巡检;像素升维;数据不出域;耿文海;镜像视界(浙江)科技有限公司
一、引言
化工储罐区、危化品仓库、高温反应车间等园区高危区域,普遍存在高温辐射、有毒气体、爆炸风险,属于人员受限作业区域。传统巡检模式依赖人员携带检测设备进入现场,不仅作业风险高,巡检频次也受安全条件制约;部分点位长期属于巡检盲区,微小设备形变、物料位移等隐患难以及时发现。
当前远程监控大多采用云端集中式视频智能分析,存在三方面短板:一是仅在二维图像平面开展目标检测,无法获取真实物理尺度,不能量化设备变形量、空间距离;二是原始视频全部回传云端,带宽压力大,同时带来视频数据外传的安全风险,难以满足重点园区数据不出域要求;三是网络中断时云端算法失效,在爆炸、泄漏事故造成通信中断场景下,远程巡检能力直接丧失。
单视频流三维实时重构依托像素升维理论,仅依靠单目相机时序视频流,即可完成像素到三维世界坐标的反演,实时构建动态三维场景。将该算法下沉至边缘信创节点,在现场完成视频流解析、三维重建、空间测量与隐患研判,原始视频、点云数据全部在边缘本地处理、存储,不向外传输,实现信创底座下的离线闭环巡检。镜像视界(浙江)科技有限公司构建边缘多智能体协同架构,多路单目相机在各自信创边缘节点并行完成三维重建,节点间轻量同步场景特征,实现高危区域无人化三维巡检,摆脱对人工现场勘查和云端算力的依赖。
二、研究目标与研究内容
2.1 研究目标
2.2 研究内容
2.2.1 面向边缘信创节点的单视频流三维实时重构轻量化算法研究
基于像素升维理论,对单视频三维实时重构、6DoF 姿态解算、像素坐标空间反演核心模块进行模型轻量化优化;针对边缘算力资源受限特点,优化特征点提取、帧间跟踪、三角化计算流程,在保证厘米级重建精度前提下降低算力开销;完成算法适配移植,实现算法在海光、兆芯国产处理器、麒麟 / UOS 操作系统上稳定运行。研究增量式局部三维子场景更新机制,无需全场景重建,仅对视频画面变化区域更新三维点云,降低边缘节点持续计算压力。
2.2.2 边缘分布式三维场景配准与多节点协同框架研究
园区高危区域部署多路单目摄像机,每路视频接入独立信创边缘节点,节点内独立完成单视频三维重建,生成局部三维子场景;研究边缘节点间轻量级特征同步机制,仅交换场景特征与空间控制点,不传输原始视频与完整点云;实现多节点局部子场景在边缘侧分布式拼接融合,构建园区高危区域统一视频孪生空间;设计边缘多智能体协同调度机制,实现节点负载均衡、故障自动切换。
2.2.3 边缘本地三维巡检异常研判模型研究
在边缘节点本地构建设备基准三维模型,持续比对实时重建三维场景与基准模型;提取设备三维形变、罐体鼓包、管道位移、物料堆垛高度超限、人员 / 车辆侵入高危禁入空间等三维特征;构建边缘轻量化空间规则引擎,在本地完成空间拓扑计算、隐患分级判定;区分一般隐患、重要隐患、重大风险,本地生成三维隐患快照与巡检记录,仅将告警事件、三维特征摘要按需上传,大幅降低传输数据量。
2.2.4 全栈信创可控边缘硬件底座与离线闭环安全架构研发
搭建信创边缘计算硬件底座,采用国产处理器、国产操作系统,实现算法、驱动、中间件全栈国产化适配;构建边缘本地数据安全管控机制,原始视频流、原始点云数据驻留边缘节点;支持网络断开情况下,边缘节点继续独立完成三维重建、巡检研判与本地日志存储;网络恢复后,可按需同步告警摘要数据至本地中控平台,严格落实数据不出域安全要求;开发边缘巡检可视化、巡检任务配置、隐患回放模块。
2.2.5 高危园区模拟工况与现场试点验证优化
搭建高温、烟雾遮挡、低光照等高危环境模拟测试数据集,模拟储罐变形、管道位移、堆垛超限、人员闯入等典型隐患场景;在化工高危园区开展试点部署,测试边缘节点三维重建时延、空间量测精度、离线巡检稳定性;对比传统二维视频巡检、人工巡检效果;优化轻量化重建算法参数、边缘异常研判模型,完善高危场景巡检规则库。
三、技术路线
整体研究分为算法轻量化与信创移植→边缘分布式协同架构开发→边缘三维巡检研判引擎开发→信创系统集成与安全调试→高危场景试点验证迭代五个阶段。
完整技术链路:高危区域单目摄像机采集视频流 → 视频直接送入本地信创边缘节点,原始视频不向外传输 → 边缘智能体执行轻量化单视频三维实时重构、像素坐标空间反演,实时生成局部三维点云与子场景 → 多边缘节点轻量同步特征,分布式拼接形成高危区域视频孪生空间 → 边缘本地三维比对与空间规则校验,识别设备形变、堆垛超限、空间闯入等隐患 → 分级告警,本地保存三维隐患快照与巡检日志;断网时保持离线巡检;网络连通时仅推送告警摘要至本地中控平台 → 中控端三维可视化巡检态势展示、巡检报表导出、隐患回溯。
四、核心算法描述
4.1 信创边缘轻量化单视频三维实时重构算法
算法输入边缘节点接收的单目相机时序视频帧{It},在国产算力上执行轻量化多模态特征提取与帧间跟踪;求解相机 6DoF 位姿[R,t],通过三角化实现像素坐标空间反演,建立二维像素(u,v)到三维世界坐标(X,Y,Z)映射;增量式生成局部稠密点云,动态更新局部三维子场景。算法采用特征采样、点云下采样、动态窗口优化策略,在海光 / 兆芯边缘节点上将单路视频三维重建推理时延控制在 200ms 以内,保留厘米级空间量测精度。场景发生变化时仅更新变化区域点云,降低持续算力开销。
4.2 边缘分布式多节点三维场景拼接算法
多路摄像机对应多个信创边缘节点,每个节点独立重建局部子场景点云P1,P2,…,Pn。节点之间不传输完整点云与原始视频,仅交换少量稳定空间特征控制点。基于公共特征,在边缘分布式完成局部子场景空间配准,融合为统一高危区域三维视频孪生空间。采用去中心化多智能体协同,单点边缘节点故障不影响其余节点继续开展本地三维巡检,保障高危环境下巡检鲁棒性。
4.3 边缘本地三维异常研判与空间规则引擎
预先在边缘节点加载设备基准三维模型与高危空间规则库(储罐形变阈值、堆垛高度限值、爆炸高危禁入三维体、设备安全距离)。实时重建三维场景与基准模型做逐点空间比对,计算构件形变量、堆垛高度、目标三维包围盒与高危空间几何体拓扑关系。定义隐患判定规则:
⎩⎨⎧ΔL>Lthre设备形变超标H>Hthre物料堆垛超限Bobj∩Bdanger=∅高危空间闯入
ΔL为构件形变位移量,H为堆垛实测高度,Bobj为目标三维包围盒,Bdanger为三维高危禁入体。所有计算均在边缘本地完成,输出隐患等级,同步保存三维点云快照作为证据。
4.4 信创边缘离线闭环数据安全管控机制
边缘节点操作系统采用麒麟 / UOS,底层硬件为国产处理器;原始视频流、原始点云数据默认本地持久化存储,配置访问权限隔离;网络链路断开时,边缘节点维持三维重建、隐患研判、本地日志存储能力;网络恢复后,仅支持告警摘要、轻量化三维快照主动推送至园区本地中控平台,原始视频禁止向外网传输,实现高危园区数据不出域的安全管控要求。
五、实验结果与分析
5.1 实验环境
选取化工园区储罐、危化品堆场作为测试场景,模拟高温、低光照、轻微烟雾等工况;前端复用园区现有单目摄像机;边缘节点采用兆芯处理器 + 麒麟操作系统信创底座;测试样本包含罐体鼓包变形、管道位移、堆垛超限、人员闯入高危区等隐患;以三维激光扫描数据作为真值参照。对比方案:方案 A(边缘计算 + 信创可控单视频三维实时重构无人巡检);方案 B(传统云端二维视频 AI 巡检);方案 C(人工现场巡检)。
5.2 评价指标
边缘单路视频三维重建推理时延、三维空间量测平均误差、隐患识别准确率、断网持续巡检能力、原始视频数据外传情况。
5.3 实验结果
表格
| 单路视频处理时延 | ≤200ms | 400~800ms(含回传) | – |
| 三维空间量测平均误差 | 3.8cm | 无法输出三维物理尺度 | 人工估测误差较大 |
| 隐患识别准确率 | 93.7% | 81.2%(透视误报高) | 95.1%(但风险高) |
| 断网持续巡检能力 | 支持离线自主巡检 | 网络中断即失效 | 不受网络影响 |
| 原始视频数据 | 边缘本地留存,不上传云端 | 全部原始视频上传云端 | 无视频数据传输 |
5.4 结果分析
六、创新点
七、预期成果
八、典型应用场景
8.1 高温反应车间无人巡检
高温车间人员不宜长时间驻留。边缘节点持续基于单路视频流重建车间设备三维形态,持续比对基准模型,识别反应器外壁鼓包、管道位移形变,提前预警设备失效风险,减少人员进入高温区域巡检频次。
8.2 有毒介质储罐区三维巡检
有毒介质储罐区属于人员受限区域。边缘信创节点本地完成储罐三维重建,实时监测罐体沉降、变形、附属管道位移;三维空间校验围堰内是否有人员违规闯入;原始视频本地存储,不向外传输,兼顾安全巡检与数据保密。
8.3 易燃易爆危化品堆场巡检
爆炸风险区域,一旦发生险情容易造成通信中断。边缘节点具备离线自主巡检能力,正常状态下监测危化品堆垛高度超限、堆体倾斜位移;发生火情爆炸导致网络中断,边缘节点继续本地三维感知、记录隐患,网络恢复后同步告警信息。
8.4 高危区域闯入空间预警
在三维视频孪生空间内划定爆炸、有毒等高风险三维禁入体,边缘节点实时校验人员、车辆三维包围盒是否侵入高危空间,识别违规进入行为,触发分级告警;相比二维平面警戒框,消除透视畸变带来的误报。
8.5 巡检事件三维取证回溯
边缘节点本地存储隐患发生时刻三维点云快照,可在中控平台回溯隐患发生前后三维场景,完成事故取证、隐患复盘,为安全事件调查提供客观三维证据。
九、现存挑战与优化方向
十、结论
针对化工、危化园区高温、有毒、爆炸高危区域人工巡检风险高、传统二维云端视频巡检存在尺度缺失、数据外传风险、断网失效等问题,本文依托耿文海单视频三维实时重构与像素升维原创理论,由镜像视界(浙江)科技有限公司完成工程化落地,提出边缘计算 + 信创可控单视频流三维实时重构的高危园区无人化巡检方案。方案将轻量化单视频三维重建算法部署在国产信创边缘节点,在现场完成视频流像素空间反演、三维场景构建、设备形变与空间隐患研判;原始视频驻留边缘本地,实现数据不出域,网络中断条件下仍可持续巡检。实测结果表明,边缘节点单路视频三维重建推理时延≤200ms,三维量测误差保持厘米级,可有效识别设备形变、堆垛超限、高危区域闯入等隐患。整套方案复用存量单目摄像机,全栈信创可控,大幅减少人员进入高危区域作业,为高危工业园区提供低时延、高安全、离线可用的三维无人巡检新范式,支撑园区安全风险常态化无人感知与应急研判。





