一种全景视频中目标物体的自动跟踪方法，步骤为：（１）获取目标物体在全景视频中的位置；（２）检查该目标在立方体全景中的运动是否出现穿越面的现象，如果是则进入步骤（３），否则进入步骤（４）；（３）对目标物体原所在面的图像进行一种扩展；（４）沿对极线方向进行搜索匹配，获取目标物体物的运动向量；（５）根据步骤（４）的结果进行判断，如果没有目标匹配，则结束跟踪；否则转入步骤（２）。本发明可用于实现全景视频中目标物体的自动跟踪，能有效减少跟踪过程中的搜索范围，并保证目标物体跟踪的快速和稳定性。