张芷铭的个人博客

点追踪关注稀疏关键点轨迹,光流估计计算稠密像素运动场。

相同点

  • 估计物体/点的运动轨迹
  • 提取视觉特征建立帧间匹配
  • 用于运动分析、目标跟踪、SLAM

核心差异

维度点追踪光流估计
目标稀疏关键点稠密像素
输入需指定/检测点全图计算
输出点轨迹序列 $(x,y)$光流场 $(u,v)$
方法特征匹配 + 轨迹推测梯度计算/深度学习
遮挡适应性利用历史信息对遮挡敏感
计算量

代表方法

点追踪

  • 经典:KLT
  • 深度学习:TAPIR、CoTracker

光流估计

  • 经典:Lucas-Kanade、Horn-Schunck
  • 深度学习:FlowNet、RAFT

应用场景

点追踪光流估计
3D 结构重建视频插帧
视频稳定运动补偿
目标跟踪行人检测
电影特效自动驾驶

结合方式

  • 点追踪可利用光流初始化
  • 光流增强遮挡场景的点追踪
  • 深度模型(RAFT、CoTracker)融合两者思想

Comments