本发明公开了一种基于有限状态机的视频通道切换方法、装置及视频解码系统。所述方法包括：定义视频通道与显示通道之间的对应关系库；设置所述对应关系库中各对应之间的转换路径；设置所述各对应之间转换路径的约束条件；根据所述对应关系库、所述各对应之间的转换路径及其约束条件，构建有限状态机；基于所述有限状态机，对用户发出的视频选择指示做出相应的响应，在需要发生对应关系转换时将视频通道与显示通道的对应关系切换到相应的状态。本发明可以减少不必要的视频通道切换和硬件开销，提高执行效率，因而带来用户视觉满意度的提高。