本发明适用于计算机视觉技术领域,提供了一种基于光场信息的三维重建方法及系统。所述方法包括:利用光场相机对待重建场景进行拍摄,获得四维光场信息;对获得的四维光场信息进行频域数字重聚焦处理,获得N张重聚焦图片序列;对获得的N张重聚焦图片序列分别进行二级小波变换,并对二级小波变换结果进行特征提取;以提取的所述特征作为输入,采用SVM回归模型对局部聚焦质量进行回归处理,以获得每个像素点的聚焦质量评价;将聚焦质量评价转化为似然深度图;通过图像分割算法对原始图像进行颜色聚类分析,提取出随机场节点,对基于颜色的随机场节点进行建模,迭代处理似然深度图,得到最终的场景深度图,以实现对场景的三维重建。