實(shí)現(xiàn)多源視頻與衛(wèi)星遙感無(wú)縫銜接，構(gòu)建天地協(xié)同資源環(huán)境監(jiān)測(cè)體系

為積極響應(yīng)關(guān)于自然資源和生態(tài)環(huán)境調(diào)查監(jiān)測(cè)標(biāo)準(zhǔn)體系的建設(shè)要求，我公司積極開(kāi)展自然資源和生態(tài)環(huán)境調(diào)查監(jiān)測(cè)的技術(shù)創(chuàng)新，按照自然資源和生態(tài)環(huán)境調(diào)查監(jiān)測(cè)體系構(gòu)建的總體設(shè)計(jì)和調(diào)查監(jiān)測(cè)工作流程構(gòu)建，研發(fā)多源視頻與遙感智能監(jiān)管平臺(tái)。平臺(tái)產(chǎn)品自主國(guó)產(chǎn)，技術(shù)原始創(chuàng)新，實(shí)現(xiàn)視頻設(shè)備一張圖展示、視頻自動(dòng)記錄回訪、像地坐標(biāo)系雙向轉(zhuǎn)換、視頻全景影像制作，視頻正射影像制作、視頻AI識(shí)別、全景三維視頻融合等核心業(yè)務(wù)模塊。

一.建設(shè)目標(biāo)

實(shí)現(xiàn)對(duì)資源環(huán)境違法事件得天地協(xié)調(diào)監(jiān)測(cè)監(jiān)管，違法場(chǎng)景現(xiàn)場(chǎng)的自動(dòng)溯源，監(jiān)測(cè)監(jiān)管平臺(tái)與各業(yè)務(wù)系統(tǒng)打通，形成業(yè)務(wù)流程閉環(huán)，探索非接觸執(zhí)法模式，能夠輔助政府對(duì)突發(fā)事件進(jìn)行快速響應(yīng)，為政府遠(yuǎn)程執(zhí)法提供技術(shù)支持。

二.平臺(tái)建設(shè)內(nèi)容

1. 視頻自動(dòng)AI識(shí)別

構(gòu)建視頻識(shí)別模型，研發(fā)智能解譯算法，重點(diǎn)實(shí)現(xiàn)資源環(huán)境通用變化監(jiān)測(cè)AI模型以及人車物等活動(dòng)物體動(dòng)態(tài)AI模型。視頻識(shí)別模型包括訓(xùn)練數(shù)據(jù)選取、數(shù)據(jù)標(biāo)注、地物識(shí)別模型研究與設(shè)計(jì)、地物識(shí)別數(shù)據(jù)訓(xùn)練、地物識(shí)別模型調(diào)整與優(yōu)化、地物識(shí)別模型測(cè)試與調(diào)優(yōu)。目前AI識(shí)別樣本場(chǎng)景兩大類：第一類資源環(huán)境通用變化監(jiān)測(cè)AI場(chǎng)景，主要包括施工行為識(shí)別（挖掘機(jī)開(kāi)挖）、建房進(jìn)度識(shí)別（違規(guī)建筑、建筑變化）、河湖監(jiān)測(cè)（河道河灘修筑道路、河道河灘建設(shè)房屋、河道河灘種植樹(shù)木、河道河灘挖沙取土、河道河灘亂堆垃圾、網(wǎng)箱養(yǎng)殖）、耕地監(jiān)測(cè)（耕地變化檢測(cè)）等；第二類人車物等活動(dòng)物體動(dòng)態(tài)AI場(chǎng)景，主要包括人為破壞監(jiān)測(cè)（人或者其他動(dòng)物進(jìn)入識(shí)別、傾倒垃圾、暴露垃圾、區(qū)域入侵、工程車監(jiān)測(cè)）、生態(tài)修復(fù)監(jiān)測(cè)（邊坡種草）、渣土監(jiān)測(cè)（傾倒渣土）等。

2. 視頻正射影像制作

對(duì)特定視頻圖像按照地理坐標(biāo)進(jìn)行轉(zhuǎn)化。計(jì)算轉(zhuǎn)換7參數(shù)，實(shí)現(xiàn)視頻圖像的正射處理。

3. 視頻全景影像制作

利用360度全景攝像頭，實(shí)現(xiàn)定時(shí)定點(diǎn)攝像頭圖像的全景拼接。

4. 像地坐標(biāo)雙向轉(zhuǎn)換

采用像地坐標(biāo)轉(zhuǎn)換技術(shù)，系統(tǒng)建立了視頻轉(zhuǎn)衛(wèi)星影像、衛(wèi)星影像轉(zhuǎn)視頻兩大重點(diǎn)模塊?？蓪?shí)現(xiàn)將視頻AI識(shí)別到的違法事件圖斑的坐標(biāo)轉(zhuǎn)大地坐標(biāo)，疊置到衛(wèi)星影像和將違法/變化圖斑（大地坐標(biāo)）轉(zhuǎn)為視頻坐標(biāo)，并標(biāo)記到對(duì)應(yīng)攝像頭的對(duì)應(yīng)視頻圖像中。

5. 視頻自動(dòng)記錄回放

實(shí)現(xiàn)攝像頭視頻的定點(diǎn)定時(shí)的視頻錄制和圖像存儲(chǔ)，同時(shí)記錄攝像頭的姿態(tài)角度信息，為事件溯源提供準(zhǔn)確的位置和時(shí)間段，為資源環(huán)境違法事件的發(fā)生過(guò)程提供證據(jù)。

6. 全景三維視頻融合

基于三維地理信息系統(tǒng) (3D GIS) 的視頻融合應(yīng)用技術(shù)，實(shí)現(xiàn)動(dòng)態(tài)視頻與虛擬場(chǎng)景的虛實(shí)融合統(tǒng)一。根據(jù)視頻場(chǎng)景內(nèi)容，與三維虛擬場(chǎng)景進(jìn)行精準(zhǔn)匹配融合，實(shí)現(xiàn)視頻真實(shí)場(chǎng)景與三維虛擬場(chǎng)景同步展現(xiàn)，解決視頻分散、割裂、頻繁手動(dòng)操控等問(wèn)題，便于跨越攝像機(jī)全景事件在場(chǎng)景中追溯和研判，決策者一攬全局、所見(jiàn)即所得。

三.技術(shù)突破

• 自主核心技術(shù)專利：視頻與衛(wèi)星大地坐標(biāo)相互轉(zhuǎn)換。創(chuàng)造性的提出視頻與大地坐標(biāo)的7參數(shù)轉(zhuǎn)換算法，實(shí)現(xiàn)視頻圖像的正射處理和衛(wèi)星圖斑的視頻坐標(biāo)轉(zhuǎn)換；
• 自主核心技術(shù)產(chǎn)權(quán)：視頻AI與衛(wèi)星遙感AI結(jié)合，形成視頻驗(yàn)證衛(wèi)星識(shí)別圖斑和衛(wèi)星驗(yàn)證視頻事件的技術(shù)方案。

四.平臺(tái)優(yōu)勢(shì)

• 自建視頻流推流服務(wù)器，實(shí)現(xiàn)攝像頭視頻實(shí)時(shí)流暢播放；
• 擁有自主化的視頻AI訓(xùn)練平臺(tái)，可根據(jù)需要實(shí)現(xiàn)不同場(chǎng)景的的模型訓(xùn)練及快速部署；
• 創(chuàng)造性的實(shí)現(xiàn)視頻AI和衛(wèi)星遙感AI的結(jié)合，實(shí)現(xiàn)AI技術(shù)在資源環(huán)境領(lǐng)域的更進(jìn)一步應(yīng)用；
• 實(shí)現(xiàn)視頻電子圍欄技術(shù)，定點(diǎn)監(jiān)測(cè)資源環(huán)境違法易發(fā)區(qū)；
• 多方接入實(shí)時(shí)推送，平臺(tái)實(shí)現(xiàn)多源數(shù)據(jù)接入能力，AI識(shí)別事件實(shí)時(shí)推送，自動(dòng)計(jì)算發(fā)生位置信息等。

五.平臺(tái)展示