由于每幅圖像是相機在不同角度下拍攝得到的，所以他們并不在同一投影平面上，如果對重疊的圖像直接進行無縫拼接，會破壞實際景物的視覺一致性。所以需要先對圖像進行投影變換，再進行拼接。一般有平面投影、柱面投影、立方體投影和球面投影等。
平面投影就是以序列圖像中的一幅圖像的坐標系為基準，將其圖像都投影變換到這個基準坐標系中，使相鄰圖像的重疊區(qū)對齊，稱由此形成的拼接為平面投影拼接；柱面投影是指采集到的圖像數據重投影到一個以相機焦距為半徑的柱面，在柱面上進行全景圖的投影拼接；球面投影是模擬人眼觀察的特性，將圖像信息通過透視變換投影到眼球部分，構造成一個觀察的球面；立方體投影是為了解決球面影射中存在的數據不宜存儲的缺點，而發(fā)展出來的一種投影拼接方式，它適合于計算機生成圖像，但對實景拍攝的圖像則比較困難。如下圖4所示，圖像拼接處理流程示意圖。