一种无标记单目视频人体骨架运动跟踪方法。其步骤如下：(1)视频图像预处理，得到背景和人体分离的二值图像；(2)二值图像距离变换，得到几何骨架；(3)几何骨架处理，寻找其端点及拐点，作为几何骨架的关键点；(4)根据预设的人体骨骼模型中人体关节的相对位置关系，对几何骨架关键点进行人体关节语义的标识；(5)对成功标识为人体关节的每个点，使用稀疏特征集光流跟踪的方法，在后继帧中找到对应的匹配点；(6)对跟踪结果中的失效部分，采用粒子滤波的方法，估计该失效部分可能的状态，恢复跟踪过程。本发明可实现单目视频中人体运动的无标记、自动跟踪，有效解决因环境变化及遮挡等因素造成的跟踪丢失问题，保证人体运动跟踪的快速与稳定性。