公安大數(shù)據(jù)應(yīng)用時(shí)代,如何將多模態(tài)的感知數(shù)據(jù)進(jìn)行融合、碰撞,為智慧警務(wù)提供豐富的多維度案件研判手段,是當(dāng)前公安實(shí)戰(zhàn)面臨的迫切需求。而語(yǔ)義智能則代表著多模態(tài)數(shù)據(jù)融合治理的技術(shù)發(fā)展趨勢(shì)。
深度學(xué)習(xí)技術(shù)走向“語(yǔ)義智能”
實(shí)際上,2006年深度學(xué)習(xí)技術(shù)的概念就已被提出,只是到 2012年才被市場(chǎng)迅速接受和認(rèn)可,而圍繞圖像識(shí)別領(lǐng)域的技術(shù)應(yīng)用突破,促進(jìn)了整個(gè)深度學(xué)習(xí)技術(shù)在視覺(jué)領(lǐng)域爆發(fā)。2017-2018年期間,國(guó)家雪亮工程建設(shè)的推動(dòng),使得深度學(xué)習(xí)技術(shù)將視頻解析能力推向一個(gè)新臺(tái)階。2018年,谷歌開(kāi)源UI 框架 Flutter Beta,推出了自然語(yǔ)言處理技術(shù),這是NLP整個(gè)技術(shù)領(lǐng)域的一個(gè)大發(fā)展。
在安防應(yīng)用領(lǐng)域,海量的物聯(lián)視頻數(shù)據(jù)催生出圍繞大數(shù)據(jù)服務(wù)的市場(chǎng)空間,傳統(tǒng)的單模態(tài)數(shù)據(jù)顯然無(wú)法應(yīng)對(duì)當(dāng)前公安大數(shù)據(jù)實(shí)戰(zhàn)需求。在此趨勢(shì)下,急需通過(guò)多維數(shù)據(jù)結(jié)合智能算法融合分析即多模態(tài)智能,形成人員與數(shù)十種實(shí)體的關(guān)系建模與智能匹配,建立不同維度和不同粒度間的數(shù)據(jù)聯(lián)系,為智慧警務(wù)研判提供更為豐富的研判手段。
多模態(tài)智能即我們說(shuō)的語(yǔ)義智能,屬于NLP技術(shù)領(lǐng)域的一個(gè)分支,是深度學(xué)習(xí)技術(shù)的最新演進(jìn)。語(yǔ)義智能不等于語(yǔ)義解析,其智能化體現(xiàn)是不但可以像人一樣擁有視覺(jué)和聽(tīng)覺(jué),而且還能像人一樣思考和行動(dòng),只有這樣一個(gè)完整的智能化狀態(tài),才能使AI達(dá)到一個(gè)高度的人機(jī)協(xié)同的狀態(tài),從而更好地解決多模態(tài)數(shù)據(jù)融合治理和應(yīng)用。
多模態(tài)數(shù)據(jù)融合治理的技術(shù)支撐
1、基于大數(shù)據(jù)平臺(tái)的融合技術(shù),從基本信息、身份特質(zhì)、背景、異常行為等多個(gè)不同維度,結(jié)合智能算法形成人員、車輛、 MAC、RFID、設(shè)備等豐富的實(shí)體智能標(biāo)簽體系,打造一個(gè)完整的知識(shí)圖譜庫(kù);2、語(yǔ)義的分析及推理非常關(guān)鍵,能夠?qū)崿F(xiàn)案情相關(guān)知識(shí)圖譜的提取,從案件中自動(dòng)分析出案發(fā)時(shí)間、案發(fā) 地點(diǎn)、作案手段、關(guān)聯(lián)實(shí)體等結(jié)構(gòu)化內(nèi)容;3、數(shù)據(jù)冷、溫、熱分層處理技術(shù)設(shè),提升在大數(shù)據(jù)量級(jí),多種類融合背景下應(yīng)用的查詢速度和資源調(diào)度效能能。
截止到現(xiàn)在,熙菱每年多維數(shù)據(jù)融合分析計(jì)算的數(shù)據(jù)量超過(guò)2000億,日常輔助公安的實(shí)戰(zhàn)算法超過(guò)30種。2019進(jìn)博會(huì)的安保項(xiàng)目,是熙菱在多模態(tài)數(shù)據(jù)融合應(yīng)用方面最經(jīng)典的案例。
(本文源自2019 a&s人工智能創(chuàng)新應(yīng)用趨勢(shì)論壇上熙菱集團(tuán)副總經(jīng)理張登的主題演講)