圖像內(nèi)容分析、主要是利用圖像信息的時(shí)間分辨能力,理解圖像,進(jìn)行目標(biāo)行為的分析。
圖像內(nèi)容分析是智能監(jiān)控的切入點(diǎn)。
圖像內(nèi)容分析,自主的定義(簡(jiǎn)單)特征、不與原始輸入相對(duì)比;通過(guò)目標(biāo)狀態(tài)和行為的分析,理解圖像內(nèi)容(判斷正常/不正常、預(yù)測(cè)趨勢(shì));通過(guò)圖像關(guān)聯(lián),實(shí)現(xiàn)目標(biāo)的識(shí)別。
圖像內(nèi)容分析分為兩個(gè)層次:
視頻探測(cè),模擬電視技術(shù)中就已得到了應(yīng)用。在一幅圖像上開(kāi)一個(gè)窗口,檢測(cè)其亮度電平的變化,就可以實(shí)現(xiàn)探測(cè)。
通過(guò)一系列窗口的監(jiān)測(cè),就可以實(shí)現(xiàn)運(yùn)動(dòng)探測(cè)。
但它不是真正的視頻探測(cè),因?yàn)椴荒艽_定目標(biāo)。
在數(shù)字視頻基礎(chǔ)上,首先確認(rèn)圖像中的探測(cè)目標(biāo),然后再進(jìn)行其行為的分析,判斷圖像中是否出現(xiàn)“不正常”情況,及時(shí)提示、警告,記錄、傳送警情(圖像),提高實(shí)時(shí)監(jiān)控的效率,避免重要信息的遺漏。
真正的視頻探測(cè),準(zhǔn)確地判斷事件,是真實(shí)探測(cè)。
視頻探測(cè)還非常適于空間多維探測(cè)和多參數(shù)探測(cè),同時(shí)處理來(lái)自不同方位攝像設(shè)備的圖像信號(hào),可以作到對(duì)目標(biāo)多方位的監(jiān)控;
實(shí)現(xiàn)對(duì)特定空間和目標(biāo)的完全封閉。
視頻語(yǔ)義解釋,閱讀一段圖像,理解圖像的內(nèi)容,并表述出來(lái),它描述的不是圖像本身,而是圖像的結(jié)構(gòu)及表現(xiàn)的內(nèi)容、情節(jié),既視頻語(yǔ)義。
根據(jù)語(yǔ)義可以對(duì)圖像信息進(jìn)行標(biāo)引,在記錄圖像的同時(shí),生成鏡像的標(biāo)引文件,然后通過(guò)標(biāo)引文件對(duì)存貯信息進(jìn)行快速和準(zhǔn)確的檢索;或?qū)崿F(xiàn)按事件記錄圖像信息和以事件為特征檢索。進(jìn)而實(shí)現(xiàn)圖像信息間的關(guān)聯(lián),圖像與聲音、圖形、文本之間的關(guān)聯(lián)。
是圖像信息深化應(yīng)用、多媒體關(guān)聯(lián)的前提。
圖像內(nèi)容分析研究的過(guò)程分四個(gè)階段,產(chǎn)品和應(yīng)用也分四個(gè)層面;
一、將(運(yùn)動(dòng))目標(biāo)從視頻圖像中分離出這來(lái)。并能在簡(jiǎn)單環(huán)境下(單目標(biāo)、背景單純)對(duì)目標(biāo)分類;
二、在簡(jiǎn)單環(huán)境下對(duì)目標(biāo)進(jìn)行行為分析,判定其運(yùn)動(dòng)的方向、方式、目標(biāo)的復(fù)合或離散,發(fā)現(xiàn)和告警異常的行為;產(chǎn)生目標(biāo)的運(yùn)動(dòng)軌跡,并能進(jìn)行目標(biāo)的自動(dòng)跟蹤;目標(biāo)的統(tǒng)計(jì)、關(guān)聯(lián)、過(guò)濾、趨勢(shì)預(yù)測(cè)等。
三、在復(fù)雜環(huán)境(既通常的視頻監(jiān)控環(huán)境)下實(shí)現(xiàn)上述功能,并實(shí)現(xiàn)(單源、多源)圖像的關(guān)聯(lián)。
四、實(shí)現(xiàn)視頻語(yǔ)義的解析,通過(guò)對(duì)一個(gè)圖像序列的理解,做出視頻語(yǔ)義解釋。目前已有了一些成果,但尚不具實(shí)用性。
第三個(gè)階段是技術(shù)實(shí)用性的關(guān)鍵,這樣系統(tǒng)才具有應(yīng)用價(jià)值,目前大多數(shù)產(chǎn)品還達(dá)不到這一階段。
視頻語(yǔ)義解釋是內(nèi)容分析的最高境界,它表明機(jī)器具有了與人一樣理解圖像的能力,但具有人所不能達(dá)到的效率,目前還達(dá)不到這個(gè)程度。
圖像結(jié)構(gòu)和內(nèi)容的描述還需要目視解釋的幫助。
前三階段可稱為視頻的半語(yǔ)義解釋。主要是判斷圖像中是否出現(xiàn)了不正常的情況,還不能準(zhǔn)確、充分地理解圖像內(nèi)容。
綜上所述,智能監(jiān)控的主要課題有視頻探測(cè)、圖像識(shí)別和視頻語(yǔ)義解釋,也是物聯(lián)網(wǎng)亟待突破的技術(shù)。