《电子测量技术杂志》发表论文赏析

注意力机制与神经渲染的多视图三维重建算法

来源:电子测量技术杂志2024年第5期北京时间:

作者:朱代先,孔浩然,秋强,刘树林,张亚莉

单位:1.西安科技大学通信与信息工程学院 西安 710054; 2.西安科技大学电气与控制工程学院 西安 710054

摘要:针对多视图立体网络在弱纹理或非朗伯曲面等挑战性区域重建效果差的问题,首先提出一个基于3个并行扩展卷积和注意力机制的多尺度特征提取模块,在增加感受野的同时捕获特征之间的依赖关系以获取全局上下文信息,从而提升多视图立体网络在挑战性区域特征的表征能力以进行鲁棒的特征匹配。其次在代价体正则化3D CNN部分引入注意力机制,使网络注意于代价体中的重要区域以进行平滑处理。另外建立一个神经渲染网络,该网络利用渲染参考损失精确地解析辐射场景表达的几何外观信息,并引入深度一致性损失保持多视图立体网络与神经渲染网络之间的几何一致性,有效地缓解有噪声代价体对多视图立体网络的不利影响。该算法在室内DTU数据集中测试,点云重建的完整性和整体性指标分别为0.289和0.326,与基准方法CasMVSNet相比,分别提升24.9%和8.2%,即使在挑战性区域也得到高质量的重建效果;在室外Tanks and Temples中级数据集中,点云重建的平均F-score为60.31,与方法UCS-Net相比提升9.9%,体现出较强的泛化能力。

关键词:多视图立体网络;三维重建;注意力机制;神经渲染

基金资助:国家自然科学基金(51774235)、陕西省重点研发计划项目(2021GY-338)、西安市碑林区科技计划项目(GX2333)资助

2024年5期其他文献查阅:

基于FPGA的稀疏卷积神经网络加速器设计

基于线阵InGaAs相机的光伏电池板光致发光成像系统研究

基于FPGA的单光子时间数字转换器设计

改进全局ZOA优化MVMD-SCN的锂电池SOH估算

改进A*算法的移动机器人全局路径规划

无人船自适应超螺旋轨迹跟踪滑模控制

基于改进AdvancedEAST的变电站仪表数显区域检测

基于改进非洲秃鹫算法优化极限学习机的船舶运动预测

基于强化学习的多段连续体机器人轨迹规划

基于M估计算法的三维点云平面拟合方法研究

基于深度Q网络的海上环境智能路径规划

改进多阶段渐进式的受电弓碳滑板图像去模糊

基于细节信息增强的无监督双目立体匹配算法

基于改进轻量化U-Net模型的光伏电池EL图像缺陷检测

基于位置感知和跨层特征融合的航拍小目标检测算法

弱纹理飞机蒙皮曲面图像特征匹配及拼接

基于原型嵌入图网络的小样本图像分类

改进暗通道的水下图像复原算法

改进Canny算子的小管径弯头漏磁缺陷图像量化方法

注意力机制与神经渲染的多视图三维重建算法

跨域飞行器惯导装置设计及抗冲击测量方法

基于互质极化敏感阵列的参数降维估计算法

基于表面肌电信号及肌肉疲劳的上肢肌力预测

基于稳态视觉诱发电位的相频特性分类算法研究

填文献完整题目 获取完整文献

填写需求
联系方式
注:学术顾问会在1小时内联系您,请留意!