多源視頻與遙感智能監(jiān)管平臺為北京愛特拉斯信息科技有限公司(下文簡稱:公司)完全自主知識產(chǎn)權(quán)服務(wù)產(chǎn)品,核心應(yīng)用為利用視頻 AI 技術(shù),實現(xiàn)對違法事件、現(xiàn)場情況的自動收集和記錄,并與各業(yè)務(wù)系統(tǒng)打通,形成業(yè)務(wù)流程閉環(huán),探索非接觸執(zhí)法模式,能夠輔助政府對突發(fā)事件進(jìn)行快速響應(yīng),為政府遠(yuǎn)程執(zhí)法提供技術(shù)支持。
1.實現(xiàn)攝像頭視頻全景影像自動拼接、勻光勻色;
2.實現(xiàn)視頻像素坐標(biāo)與大地坐標(biāo)相互轉(zhuǎn)換;
3.自然資源違法行為AI識別;
4.業(yè)務(wù)功能定制化。
產(chǎn)品的核心功能聚焦主要在:正射影像、全景處理、違法圖斑輔助核查、視頻AI場景識別、坐標(biāo)雙向轉(zhuǎn)化五個方面。
核心功能 |
功能敘述 |
正射影像 |
對特定視頻段按照地理坐標(biāo)進(jìn)行轉(zhuǎn)化。(具體方法為:計算地面點坐標(biāo)、計算像點坐標(biāo)、灰度內(nèi)插、灰度賦值,主要步驟包括校正控制點采集和區(qū)域網(wǎng)平差,利用攝像機(jī)等提供的一些姿態(tài)參數(shù)以及與地面系統(tǒng)相關(guān)的處理參數(shù)來進(jìn)行粗校正,再結(jié)合衛(wèi)星影像和DEM數(shù)據(jù)對影像做精細(xì)校正。) |
全景處理 |
對特定視頻段進(jìn)行全景拼接。(具體方法為:特征點提取,特征點匹配,控制點生成,全景模型優(yōu)化,接縫線提取,圖像勻色。為了提高拼接的速度,首先需要從視頻數(shù)據(jù)中抽取關(guān)鍵幀,關(guān)鍵幀之間有明顯的旋轉(zhuǎn)變化。對關(guān)鍵幀提取特征點和匹配,利用匹配的結(jié)果來生成控制點,然后基于全景模型來進(jìn)行整體優(yōu)化計算出每個關(guān)鍵幀的姿態(tài),最后根據(jù)姿態(tài)來進(jìn)行拼接。在拼接過程中,接縫線提取和勻色算法可以解決不同關(guān)鍵幀的色調(diào)不一致的問題) |
違法圖斑輔助核查 |
通過衛(wèi)星影像傳違法圖斑的上傳,自動檢索出對應(yīng)的攝像頭,輔助查驗違法事件。(具體方法為:針對違法圖斑進(jìn)行樣本采集和深度學(xué)習(xí)模型訓(xùn)練,實現(xiàn)違法圖斑在視頻中的智能識別;并通過像地坐標(biāo)系的轉(zhuǎn)換,將違法圖斑的位置、時間投射到相應(yīng)視頻或監(jiān)控中,輔助違法圖斑核查) |
視頻AI場景識別 |
目前AI識別樣本場景有:施工行為識別(挖掘機(jī)開挖)、建房進(jìn)度識別(違規(guī)建筑、建筑變化)、河湖監(jiān)測(河道河灘修筑道路、河道河灘建設(shè)房屋、河道河灘種植樹木、河道河灘挖沙取土、河道河灘亂堆垃圾、網(wǎng)箱養(yǎng)殖)、耕地監(jiān)測(耕地變化檢測)、人為破壞監(jiān)測(人或者其他動物進(jìn)入識別、傾倒垃圾、暴露垃圾、區(qū)域入侵、工程車監(jiān)測)生態(tài)修復(fù)監(jiān)測(黑臭水體、邊坡種草)渣土監(jiān)測(傾倒渣土),在樣本的基礎(chǔ)上,針對不同的地物進(jìn)行深度學(xué)習(xí)模型訓(xùn)練算法,主要采用全卷積網(wǎng)絡(luò)(CNN)與條件隨機(jī)場(CRF)算法。在經(jīng)過不斷的模型研發(fā)和測試之后,構(gòu)建較為穩(wěn)健的應(yīng)用模型。針對實際地物識別應(yīng)用場景、進(jìn)行相應(yīng)的違法行為規(guī)則編制。 |
坐標(biāo)雙向轉(zhuǎn)化 |
滿足大地坐標(biāo)轉(zhuǎn)視頻坐標(biāo),同時也滿足視頻坐標(biāo)轉(zhuǎn)大地坐標(biāo)。 |
執(zhí)法監(jiān)測、視頻監(jiān)控、智能交通、行車輔助等。