本发明公开了单目视频场景三维结构的多视角一致的平面检测解析方法，步骤：输入单目视频提取关键帧并生成包含噪音的半稠密点云；在关键帧图像中提取二维线段，将二维线段反投影到三维空间中得到对应的点云；将单帧提取得到的线段投影到其他关键帧中，根据多视角一致的约束，过滤掉点云中的噪音点，得到满足约束的点云，拟合点云得到三维线段；根据线线相交必然位于同一个平面中的约束，从三维线段中提取相交线段并构建平面，从而通过多视角一致约束从包含噪音的三维点云中检测解析得到单目视频场景中的平面；根据用户需求将重建得到的平面应用于增强现实中。本发明在平面重建、虚实融合等方面有良好的表现，可广泛应用于增强现实领域。