什么是多路監(jiān)控視頻拼接？

針對(duì)監(jiān)控?cái)z像頭，將多個(gè)相互之間畫(huà)面有重疊的視頻流通過(guò)魚(yú)眼矯正->透視變換->裁切->拼接成一路完整的全景視頻。即通過(guò)視頻拼接技術(shù)，對(duì)有重疊區(qū)域的多路源視頻數(shù)據(jù)利用拼接算法進(jìn)行無(wú)縫實(shí)時(shí)拼接，消除重疊區(qū)域，形成寬角度、大視場(chǎng)視頻圖像，從而實(shí)現(xiàn)將多路監(jiān)控視頻拼接成一路視頻，使拼接后的視頻清晰無(wú)縫，并實(shí)時(shí)播放，同時(shí)支持回放查看，解決多個(gè)人同時(shí)對(duì)同一監(jiān)控場(chǎng)景不同角度進(jìn)行觀看的需求，充分滿(mǎn)足用戶(hù)的需求。

傳統(tǒng)監(jiān)控的痛點(diǎn)？

?（1）視頻畫(huà)面分散、信息孤島：在傳統(tǒng)視頻監(jiān)控系統(tǒng)中，監(jiān)管人員需要觀看多個(gè)分鏡頭畫(huà)面，很難將零散的分鏡頭視頻與其實(shí)際地理位置對(duì)應(yīng)，無(wú)法對(duì)大場(chǎng)景進(jìn)行全局實(shí)時(shí)監(jiān)測(cè)和歷史事件的快速回溯查找，海量零散監(jiān)控視頻資源既“看不過(guò)來(lái)”又“看不太懂”。

（2）AI 單畫(huà)面分析、數(shù)據(jù)價(jià)值低：在監(jiān)控AI識(shí)別中，一個(gè)目標(biāo)可能會(huì)出現(xiàn)在多個(gè)鏡頭中，識(shí)別算法去重難度大，且識(shí)別計(jì)算效率低。

（3）單畫(huà)面中標(biāo)定信息，有重復(fù)：在視頻流中標(biāo)定目標(biāo)信息，由于單個(gè)目標(biāo)出現(xiàn)在多個(gè)畫(huà)面中，導(dǎo)致標(biāo)定信息重復(fù)，信息冗余，通過(guò)全景視頻可以在全景視頻中實(shí)時(shí)標(biāo)定目標(biāo)信息，唯一且準(zhǔn)確。

如何解決痛點(diǎn)？

通過(guò)多路視頻拼接，將多個(gè)攝像頭視頻實(shí)時(shí)拼接為一路全景視頻。拼接過(guò)程：

Step1：魚(yú)眼（畸變）矯正：

由于制造、安裝、工藝等原因，鏡頭存在著各種畸變。為了提高攝像機(jī)拼接的精度，在進(jìn)行視頻拼接的時(shí)候必須考慮鏡頭的畸變。一般的畸變分為內(nèi)部畸變、外部畸變，內(nèi)部畸變是由于攝像頭本身的構(gòu)造原因產(chǎn)生的，外部畸變?yōu)橥队胺绞降募弦蛩禺a(chǎn)生的，鏡頭畸變屬于內(nèi)部畸變。通過(guò)魚(yú)眼矯正，將畫(huà)面進(jìn)行視覺(jué)拉伸調(diào)整。

Step2：透視變換：

由于不同攝像頭安裝的高低、遠(yuǎn)近、角度不同，拍攝的畫(huà)面并不在同一投影平面上，如果對(duì)重疊的圖像直接進(jìn)行無(wú)縫拼接，會(huì)破壞實(shí)際畫(huà)面的視覺(jué)一致性。所以要先對(duì)圖像進(jìn)行透視等變換，調(diào)整為一致的視角，再進(jìn)行拼接。

Step3：視頻裁切：

對(duì)拼接后的畫(huà)面，裁切多余的部分，保留最終視頻畫(huà)面。

拼接后的結(jié)果：

不同客戶(hù)對(duì)拼接后視頻的使用需求各有不同，可以根據(jù)需求來(lái)定制，已支持的方式如下：

（1）方式一：通過(guò)我們自帶的播放器觀看拼接后的全景視頻畫(huà)面

（2）方式二：內(nèi)存共享視頻流，該方式適用于在本機(jī)中做視頻分析，效率更高

（3）方式三：拉流的方式，我們輸出指定格式的實(shí)時(shí)視頻流，如RTSP，F(xiàn)LV（適合于web播放）等格式，該方式在局域網(wǎng)或者外網(wǎng)中看全景視頻，或者做AI識(shí)別。

應(yīng)用場(chǎng)景

應(yīng)用于安防監(jiān)控、智能交通、港口、保密單位出入口、園區(qū)、礦山、井下、工廠(chǎng)等場(chǎng)景。

應(yīng)用案例

案例一：8路港口視頻的拼接

拼接前效果：

拼接后的效果：

元鏡像

，贊7

案例二：6路港口視頻的拼接

拼接前效果：

拼接后的效果：

常見(jiàn)問(wèn)題：

1. 支持的攝像頭有哪些？答：常見(jiàn)的?？?、大華、宇視、天地偉業(yè)等攝像頭、NVR都支持。即只要設(shè)備支持國(guó)標(biāo)28181協(xié)議，或者國(guó)際標(biāo)準(zhǔn)ONVIF，RTSP等格式均可。2. 拼接后的延時(shí)大概是？答：延時(shí)一般在600ms左右，具體跟服務(wù)器、帶寬等配置有關(guān)。3. 交付的是軟件還是硬件？答：交付的是軟件，包含（1）后臺(tái)服務(wù)有-視頻接入服務(wù)、拼接服務(wù)，部署在客戶(hù)服務(wù)器中；（2）拼接工具，含web工具和客戶(hù)端工具。4. 需要配置什么硬件，配置要求是？答：需要服務(wù)器一臺(tái)，推薦Nvidia ?RTX 3060 及以上顯卡；服務(wù)器為windows操作系統(tǒng)。