1. 黄河水利职业技术大学
2. 河南省跨流域区域引调水运行与生态安全工程研究中心
Published:2026
移动端阅览
崔争艳, 程梦然, 刘辉, et al. 基于跨模态表征学习的水电施工安全风险识别研究[J]. 2026, 44(8): 100-105.
DOI:
崔争艳, 程梦然, 刘辉, et al. 基于跨模态表征学习的水电施工安全风险识别研究[J]. 2026, 44(8): 100-105. DOI: 10.20040/j.cnki.1000-7709.2026.20260069.
为及时识别水电施工场景中不断动态交织、复杂演变的安全风险,克服传统方法的语义局限和高误判率,降低安全事故发生率,提出一种结构化语义门控跨模态融合方法(SSG-CMF)
通过建立施工图像与违章条款和风险等级的深层语义关联,实现从视觉感知到风险判定的精准映射。首先,利用DINOv2、DeBERTa模型分别提取图像和文本模态表征,经过非线性变换映射至统一语义空间;然后,引入注意力机制生成动态门控权重,结合关联语义库对图像与文本模态表征进行自适应融合,获取风险感知的跨模态表征;最终,通过分类器联合输出违章条款与对应的风险等级。根据两座大型水电站真实违章检查记录的试验表明,SSG-CMF在准确率、召回率等指标上均优于基线模型,尤其在逻辑一致性方面表现突出,不一致率低至5.1%
较最优基线模型降低63.04%
充分说明所提方法能有效约束预测结果符合风险判定的映射规则,显著提升模型输出的规范一致性与工程可信度,为高风险水电施工场景提供可解释、可追溯的智能安全监测新范式。
张社荣,梁斌杰,马重刚,董发俊,王超,王枭华.水利工程施工人员不安全行为识别方法[J].水力发电学报,2023(08).
赵江平,刘星星,张想卓.基于改进YOLOv5s的外脚手架隐患图像识别技术[J].中国安全科学学报,2023(12).
李艳丽,章志明,桂单明.基于多源数据的水利工程质量风险方法评估[J].水电能源科学,2024(10).
徐亮,陈旭,张卓,郑向泉.基于YOLOv5算法的长江大保护水利工程项目多场景质量安全检测[J].水利水电科技进展,2025(02).
王铁力,肖强,缪树杰,曹春泉,周明明,刘永涛.基于多信息链融合的智慧水利工程施工平台架构研究[J].水电能源科学,2026(03).
荣耀,于平林,李永威,王培,丁海滨.面向复杂施工环境的人员防护装备穿戴识别方法对比研究[J].安全与环境学报,2026(04).
0
Views
下载量
CSCD
Publicity Resources
Related Articles
Related Author
Related Institution