本发明涉及计算机视觉领域,提供一种基于射影不变量的直线匹配方法,包括:步骤1、采集两幅图像;步骤2、对参考图像和待匹配图像进行直线检测,得到参考图像的直线集和待匹配图像的直线集;并进行特征点匹配,得到特征点匹配点集;步骤3、分别获得参考图像和待匹配图像中每条直线的梯度方向;步骤4、使用直线交点和梯度重新定位参考图像和待匹配图像中直线的端点;步骤5、进行参考图像和待匹配图像中的特征点分簇;步骤6、利用直线上两点和直线附近三点构成的五点射影不变量,确定参考图像和待匹配图像中对应局部点集的相似度,并确定参考点集对;步骤7、根据参考点集对及其相似度,进行直线匹配。本发明能提高直线匹配精确性和可靠性。