本发明公开一种兼容不同分辨率和宽长比的多视频缩放模块及并行工作方法,包括(1)、根据输入视频分辨率和输出分辨率需求,确定缩放模块个数;(2)、根据步骤(1)确定的个数和缩放算法,构建插值窗;(3)、由缩放模块产生控制信号,从行存中读取数据并更新到插值窗中;(4)、根据缩放模块产生的控制信号,从步骤(2)构建的插值窗中选取对应数据分别送到工作的缩放模块;每个缩放模块分别将视频源各子视场相对应的位置数据进行缩放,再将缩放后的数据融合输出。本发明在数据吞吐率大幅度增加的前提下使系统能在较低时钟频率下稳定工作;同时该发明兼容普通的2D视频源缩放和裸眼3D视频的缩放处理,而且兼容不同宽长比的显示终端。