根据国家网信办相关规定和要求,《计算机应用研究》编辑部网站域名更换为arocmag.cn,原域名 arocmag.com 自2025年1月1日起自动跳转到新域名。

多模态融合与球面采样的层级式位姿估计

Hierarchical pose estimation with multimodal fusion and spherical sampling
李欣1,2,3
况立群1,2,3
赵融1,2,3
韩慧妍1,2,3
杨晓文1,2,3
1. 中北大学 计算机科学与技术学院, 太原 030051
2. 机器视觉与虚拟现实山西省重点实验室, 太原 030051
3. 山西省视觉信息处理及智能机器人工程研究中心, 太原 030051

摘要

六自由度位姿估计作为三维空间感知的关键技术,广泛应用于机器人抓取、自动驾驶和智能制造等领域。针对RGB-D图像的六自由度估计,如何深度融合RGB图像的语义信息和深度图像的几何信息仍是一大挑战。现有方法大多采用双流网络或特征拼接策略,采用先独立处理各模态数据再融合的策略,但因缺乏跨模态的特征对齐机制,导致语义-几何信息耦合不足,限制了估计精度。为此,提出了一种基于多模态融合与球面采样的位姿估计框架—SpherePose。该方法首先基于Icosphere实现均匀采样,生成多样化初始位姿假设;然后,引入基于多模态特征融合的位姿优化模块,对初始位姿假设进行迭代细化,联合RGB图、深度图和三维坐标图提升位姿估计精度;最后设计具备双重注意力与分层排序机制的位姿评分网络,筛选最优位姿。在BOP基准测试中,提出的方法在LineMOD和YCB-Video数据集上的ADD(s)-0.1d和ADD-s AUC指标分别达到99.8%和97.7%,显著优于对比方法,展现出更高的准确性与鲁棒性。综上,整体框架为多模态融合与姿态筛选提供了一种高效且可靠的解决方案,提高了6D位姿估计精度。

基金项目

山西省科技重大专项计划"揭榜挂帅"项目(202201150401021)
山西省自然科学基金资助项目(202303021211153)
山西省科技成果转化引导专项(202104021301055)

出版信息

DOI: 10.19734/j.issn.1001-3695.2025.05.0195
出版期卷: 《计算机应用研究》 优先出版, 2026年第43卷 第1期

发布历史

[2025-09-16] 优先出版

引用本文

李欣, 况立群, 赵融, 等. 多模态融合与球面采样的层级式位姿估计 [J]. 计算机应用研究, 2026, 43 (1). (2025-09-17). https://doi.org/10.19734/j.issn.1001-3695.2025.05.0195. (Li Xin, Kuang Liqun, Zhao Rong, et al. Hierarchical pose estimation with multimodal fusion and spherical sampling [J]. Application Research of Computers, 2026, 43 (1). (2025-09-17). https://doi.org/10.19734/j.issn.1001-3695.2025.05.0195. )

关于期刊

  • 计算机应用研究 月刊
  • Application Research of Computers
  • 刊号 ISSN 1001-3695
    CN  51-1196/TP

《计算机应用研究》创刊于1984年,是由四川省科技厅所属四川省计算机研究院主办的计算技术类学术刊物。

《计算机应用研究》瞄准本学科领域迫切需要的前沿技术,及时反映国内外计算机应用研究的主流技术、热点技术及最新发展趋势。主要刊载内容包括本学科领域高水平的学术论文、本学科最新科研成果和重大应用成果。栏目内容涉及计算机学科新理论、计算机基础理论、算法理论研究、算法设计与分析、区块链技术、系统软件与软件工程技术、模式识别与人工智能、体系结构、先进计算、并行处理、数据库技术、计算机网络与通信技术、信息安全技术、计算机图像图形学及其最新热点应用技术。

《计算机应用研究》拥有众多高层次读者、作者,读者对象主要为从事计算机学科领域高、中级研究人员及工程技术人员,各高等院校计算机专业及相关专业的师生。多年来《计算机应用研究》的总被引频次及Web下载率一直名列本学科同类学术刊物前茅,所刊发的学术论文以其新颖性、学术性、前瞻性、导向性、实用性而备受广大读者的喜爱。


收录和评价

  • 第二届国家期刊奖百种重点期刊
  • 中国期刊方阵双效期刊
  • 全国中文核心期刊(北大2023年版)
  • 中国科技核心期刊
  • 中国科学引文数据库(CSCD)来源期刊
  • RCCSE中国核心学术期刊
  • 中国计算机学会会刊
  • 2020—2022年科技期刊世界影响力指数(WJCI)报告收录期刊
  • 中国科技期刊精品数据库全文来源期刊
  • 中国学术期刊综合评价数据库来源期刊
  • 《中国期刊网》《中国学术期刊(光盘版)》来源期刊
  • 2017—2019年中国国际影响力优秀学术期刊(自然科学与工程技术)
  • 中国精品科技期刊顶尖学术论文(F5000)项目来源期刊
  • 《中国工程技术电子信息网》《电子科技文献数据库》来源期刊
  • 英国《科学文摘》(INSPEC)来源期刊
  • 《日本科学技术振兴机构数据库》(JST)来源期刊
  • 俄罗斯《文摘杂志》(AJ, VINITI)来源期刊
  • 美国《艾博思科学术数据库》(EBSCO)全文来源期刊
  • 美国《剑桥科学文摘(自然科学)》(CSA(NS))核心期刊
  • 波兰《哥白尼索引》(IC)来源期刊
  • 美国《乌利希期刊指南(网络版)》(Ulrichsweb)收录期刊