點(diǎn)擊上方藍(lán)字關(guān)注我們

微信公眾號(hào)：OpenCV學(xué)堂

關(guān)注獲取更多計(jì)算機(jī)視覺(jué)與深度學(xué)習(xí)知識(shí)

前言

圖像/視頻拼接的主要目的是為了解決相機(jī)視野(FOV-Field Of View)限制，生成更寬的FOV圖像/視頻場(chǎng)景。視頻拼接在體育直播、全景顯示、數(shù)字娛樂(lè)、視頻處理中都被廣泛應(yīng)用，同時(shí)視頻/圖像拼接涉及到矯正圖像、對(duì)其與匹配圖像、融合、統(tǒng)一光照、無(wú)縫連接、多尺度重建等各個(gè)圖像算法模型與細(xì)節(jié)處理，可以說(shuō)是圖像處理技術(shù)的綜合運(yùn)用。特別是最近幾年收到深度學(xué)習(xí)的影響，各種基于深度學(xué)習(xí)的圖像對(duì)齊與拼接技術(shù)也取得了長(zhǎng)足發(fā)展。

01

圖像拼接流程

圖像拼接流程主要是針對(duì)輸入系列視頻幀或者圖像，基于像素像素或者特征點(diǎn)相似然后對(duì)齊圖像、融合對(duì)齊之后的圖像，更新全景圖像拼接結(jié)果，圖示如下：

最常見(jiàn)就是基于SIFT/SURF/OBR/AKAZE等方法實(shí)現(xiàn)特征提取，基于RANSAC等方法實(shí)現(xiàn)對(duì)齊，基于圖像融合或者無(wú)縫克隆算法實(shí)現(xiàn)對(duì)齊圖像的拼接。

針對(duì)不同的拼接方式可以分為圖像拼接、視頻拼接、全景拼接。針對(duì)圖像拼接可以分為像素相似與特征相似；視頻拼接又分為固定相機(jī)、移動(dòng)相機(jī)；全景拼接分為單相機(jī)、相機(jī)列陣、魚(yú)眼相機(jī)列陣。圖示如下：

02

深度學(xué)習(xí)方法

通過(guò)卷積神經(jīng)網(wǎng)絡(luò)CNN可以更好的學(xué)習(xí)與提取圖像特征、通過(guò)語(yǔ)義分割獲取初始匹配、然后對(duì)齊，圖示如下：

其中IA與IB是輸入圖像，CNN是預(yù)訓(xùn)練的特征提取網(wǎng)絡(luò)模型，匹配網(wǎng)絡(luò)與回歸網(wǎng)絡(luò)。其中匹配網(wǎng)絡(luò)主要是計(jì)算相似程度，其網(wǎng)絡(luò)計(jì)算方式如下：

回歸網(wǎng)絡(luò)的結(jié)構(gòu)如下：

因依老宿發(fā)心初

半學(xué)修心半讀書(shū)

?推薦閱讀?

OpenCV4系統(tǒng)化學(xué)習(xí)路線圖-視頻版本！

Tensorflow + OpenCV4 安全帽檢測(cè)模型訓(xùn)練與推理

匯總 | OpenCV DNN模塊中支持的分類網(wǎng)絡(luò)

OpenCV中支持的人臉檢測(cè)方法整理與匯總

詳解ENet | CPU可以實(shí)時(shí)的道路分割網(wǎng)絡(luò)

從Pytorch 的ONNX到OpenVINO中IR中間層

OpenCV 基于Inception模型圖像分類

OpenCV4.4 + YOLOv4 真的可以運(yùn)行了…..

總結(jié)

以上是生活随笔為你收集整理的opencv4 图像特征匹配_概述 | 全景图像拼接技术全解析的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。