本发明公开了一种车载红外夜视系统，包括一红外摄像装置、一可见光摄像装置、图像数据处理单元、显示装置；其中红外摄像装置、可见光摄像装置分别与图像数据处理单元的输入端连接；本发明还公开了采用该车载红外夜视系统进行多源图像融合的方法，步骤如下：（1）读入可见光图像与红外图像的图像数据，分别进行预处理；（2）分别进行特征点选取，分别提取多尺度边缘并二值化；（3）在边缘处采用LTS-Hausdorff距离精确匹配；（4）仿射变换对待匹配图进行处理；（5）对配准输出图像进行改进Laplace金字塔图像融合。本发明使融合时间较少，效率更高，融合显示效果更好。