基于多相机融合的移动行人跟踪
作者:
作者单位:

(武汉科技大学 信息科学与工程学院/人工智能学院,湖北 武汉 430081)

作者简介:

赵云涛 (1982-),男,博士,教授,硕士生导师,主要从事智能机器人系统、三维机器视觉、机器人学、工业AI边缘计算方面的研究。

通讯作者:

中图分类号:

TP391.41

基金项目:

国家自然科学基金(51774219)和湖北省教育厅科学技术研究项目(B2020012) 资助项目


Mobile pedestrian tracking based on multi-camera information fusion
Author:
Affiliation:

(School of Information Science and Engineering, Wuhan University of Science and Technology,Wuhan, Hubei 430081, China)

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    针对室内环境下移动行人的跟踪问题,提出一种基于单目视觉和深度视觉传感信息融合的移动目标跟踪方法。首先利用单目视觉图像信息实现目标检测,并完成目标的语义分割;然后将单目视觉与深度视觉进行联合标定,通过深度相机获得识别目标的深度信息;最后,基于对目标跟踪实时性、准确性的需求,针对单目视觉P3P(perspective-3-point)解算在目标较远时误差较大、深度相机识别帧率较慢的问题,设计了一种基于多相机信息融合的移动目标跟踪方法,将单目视觉获得的距离信息与深度视觉提取的深度信息进行了基于卡尔曼滤波的异步融合,实现对目标运动状态的准确估计。结果表明,该算法实现了对视野内行人目标位置实时检测和跟踪效果,具有高效的目标识别和跟踪能力。

    Abstract:

    For the tracking problem of moving pedestrians in indoor environment,this paper proposes a moving target tracking method based on the fusion of monocular vision and depth vision sensing information.Firstly,we use monocular vision image information to achieve target detection and complete semantic segmentation of the target.Then,we jointly calibrate monocular vision with depth vision to obtain the depth information of the recognition target by the depth camera.Finally,a moving target tracking method based on multi-camera information fusion is designed to address the problems of large error in monocular vision perspective-3-point (P3P) solution when the target is far away and slow frame rate of depth camera recognition,and the distance information obtained from monocular vision and depth information extracted from depth vision are asynchronously fused to achieve accurate estimation of the target motion state.The results show that the algorithm achieves the effect of real-time detection and tracking of pedestrian target positions within the field of view,with efficient target recognition and tracking capabilities.

    参考文献
    相似文献
    引证文献
引用本文

陈修齐,赵云涛,李维刚,黄嘉辉.基于多相机融合的移动行人跟踪[J].光电子激光,2024,35(10):1032~1042

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2023-03-12
  • 最后修改日期:
  • 录用日期:
  • 在线发布日期: 2024-09-03
  • 出版日期: