根據(jù)相關(guān)機(jī)構(gòu)最新的市場預(yù)測，AI市場目前以計算機(jī)視覺為主，而其中視頻監(jiān)控是最大的市場。換句話說，基于視頻圖像數(shù)據(jù)的智能化應(yīng)用是目前AI領(lǐng)域的主要應(yīng)用。

視頻圖像數(shù)據(jù)的應(yīng)用前景

視頻圖像數(shù)據(jù)廣泛應(yīng)用于智能化應(yīng)用場景

視頻圖像數(shù)據(jù)具有對人、物進(jìn)行識別的特點(diǎn)，這使其在以人、物為中心的應(yīng)用場景中發(fā)揮巨大價值。目前，除了在安防領(lǐng)域中得到了核心應(yīng)用，視頻圖像數(shù)據(jù)在商業(yè)、金融、平安城市、無人駕駛等領(lǐng)域均有應(yīng)用。

例如，在智能商場應(yīng)用場景中，顧客、店鋪經(jīng)營者、商場運(yùn)營方分別存在以下需求：

顧客：方便地進(jìn)店、購物、付款；獲取專屬折扣及個性化推薦……；

店鋪經(jīng)營者：提升進(jìn)店率、轉(zhuǎn)化率、客單價；增加經(jīng)營利潤……；

商場運(yùn)營方：提升整體客流；通過提供增值服務(wù)實(shí)現(xiàn)租金、廣告位收入的最大化；預(yù)防安全事故……

針對上述需求，智能應(yīng)用會基于視頻圖像數(shù)據(jù)并融合會員數(shù)據(jù)、銷售數(shù)據(jù)等業(yè)務(wù)數(shù)據(jù)提供智能功能，舉一個完整使用各類數(shù)據(jù)的例子：

顧客到店后，根據(jù)抓拍的人臉數(shù)據(jù)結(jié)合會員數(shù)據(jù)做會員到店識別，再基于會員的購買記錄和之前的到店行動軌跡挖掘做用戶的購買畫像，通過APP推送精準(zhǔn)推薦給到店的顧客。在顧客選擇其中的商品后，根據(jù)抓拍識別客戶當(dāng)前位置并提供直達(dá)選擇商品的導(dǎo)航。這樣一來，既方便了顧客也提高了轉(zhuǎn)化率。

智能商場應(yīng)用場景解決方案

智能化應(yīng)用場景中的數(shù)據(jù)處理需求

智能商場是視頻圖像數(shù)據(jù)在智能化場景中的典型應(yīng)用之一。綜合來看，在智能化應(yīng)用場景中，我們通常會面對結(jié)構(gòu)化與非結(jié)構(gòu)化混合形成的數(shù)據(jù)，需要對數(shù)據(jù)做三個階段的處理，即視頻圖像數(shù)據(jù)的接入、視頻圖像數(shù)據(jù)及業(yè)務(wù)數(shù)據(jù)的處理、數(shù)據(jù)使用，這也是常見的物聯(lián)網(wǎng)數(shù)據(jù)處理架構(gòu)方案。

數(shù)據(jù)處理方案

其中，在第二階段的數(shù)據(jù)處理中，通常會存在以下四種數(shù)據(jù)處理需求：

01

數(shù)據(jù)的感知類計算

需將視頻圖像數(shù)據(jù)進(jìn)行圖像處理、建模、識別，結(jié)構(gòu)化等操作。某些應(yīng)用場景如黑名單報警由于實(shí)時性要求高，部分計算需在智能邊緣設(shè)備中才能實(shí)現(xiàn)；

02

數(shù)據(jù)的實(shí)時流式計算

某些應(yīng)用場景如客流統(tǒng)計、熱點(diǎn)區(qū)域等需進(jìn)行實(shí)時反饋結(jié)果的流式計算；

03

數(shù)據(jù)的多維計算

某些應(yīng)用場景如人車關(guān)聯(lián)、頻繁出入分析等涉及到聚類后圖像數(shù)據(jù)的碰撞；動線分析等場景需進(jìn)行圖像數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù)之間的關(guān)聯(lián)……通常情況下，這類計算需求和傳統(tǒng)數(shù)據(jù)倉庫中的操作類似，需進(jìn)行大量結(jié)構(gòu)化數(shù)據(jù)的處理工作；

04

數(shù)據(jù)挖掘

高級分析、預(yù)測類功能如用戶畫像里大量使用的聚類、預(yù)測里大量使用的回歸都會涉及到對各類數(shù)據(jù)做數(shù)據(jù)挖掘。

由于響應(yīng)時間、吞吐量和計算模式的不同，上述數(shù)據(jù)處理需求通常使用多種數(shù)據(jù)處理組件實(shí)現(xiàn)不同類型的計算，以便在幾種計算場景中獲得較高的效率。

目前，大部分?jǐn)?shù)據(jù)處理需求都采用Hadoop生態(tài)的各類計算組件實(shí)現(xiàn)，但在數(shù)據(jù)量不大、成本存在限制等小規(guī)模使用場景中，仍存在硬件資源有限、組件出故障幾率高、維護(hù)成本突出等問題。

因此，在上述小規(guī)模場景下，使用更輕量的解決方案更為合適。輕量的解決方案應(yīng)滿足感知計算、實(shí)時計算、多維查詢、數(shù)據(jù)挖掘等計算需求，具備完整的資源配額功能支持和其他模塊混合部署，可透明擴(kuò)展；同時，使用單一組件可降低資源開銷及維護(hù)成本。

人大金倉MPP數(shù)據(jù)庫：

滿足小規(guī)模場景數(shù)據(jù)處理需求

人大金倉悉心打造的MPP數(shù)據(jù)庫可以更好解決小規(guī)模視頻圖像數(shù)據(jù)+業(yè)務(wù)數(shù)據(jù)處理場景的數(shù)據(jù)處理需求，它具備以下優(yōu)勢特點(diǎn)：

1

通過UDF集成感知算法實(shí)現(xiàn)感知計算

常見的應(yīng)用場景如抓拍、以圖搜圖等可通過SQL實(shí)現(xiàn)；同時，MPP數(shù)據(jù)庫本身具備的并行執(zhí)行方式會在全部計算節(jié)點(diǎn)上做并行的比對計算；

2

通過概率數(shù)據(jù)結(jié)構(gòu)增強(qiáng)實(shí)時計算能力

例如使用hyperloglog可做實(shí)時的到店流量統(tǒng)計，基于聚類后實(shí)名/匿名ID的十億級數(shù)據(jù)量可實(shí)現(xiàn)毫秒級響應(yīng)；

3

通過并行SQL支持，提供多維查詢功能

通過獲取顧客按時間順序出現(xiàn)的抓拍位置計算行動軌跡、通過關(guān)聯(lián)交易系統(tǒng)的交易數(shù)據(jù)獲取顧客在軌跡中的購買記錄等應(yīng)用場景需要用到聚類后數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù)的OLAP關(guān)聯(lián)查詢。支持OLAP是MPP數(shù)據(jù)庫的基礎(chǔ)能力，MPP基于代價的優(yōu)化器和各類優(yōu)化規(guī)則則可以保證執(zhí)行的效率；

4

內(nèi)置并行數(shù)據(jù)挖掘算法，提供數(shù)據(jù)挖掘功能

支持使用內(nèi)置的聚類算法可對顧客進(jìn)行畫像，使用回歸算法可實(shí)現(xiàn)客流和銷售預(yù)測等功能。MPP提供的庫內(nèi)數(shù)據(jù)挖掘可減少數(shù)據(jù)移動的開銷，在資源有限的情況，這無疑是一個 更好的選擇；

5

支持CGROUP控制資源及單機(jī)混合部署

可通過資源配額為挖掘/報表類任務(wù)和實(shí)時任務(wù)分配不同的CPU比率，這樣一來，夜間進(jìn)行批量數(shù)據(jù)挖掘處理時可以占用全部資源計算，也可在有實(shí)施任務(wù)時降級使用較少的計算資源，減少對系統(tǒng)占用的影響。同時，整體的占用比率限制可以支持MPP和應(yīng)用系統(tǒng)混合部署在同一服務(wù)器；

6

使用單一組件，資源使用更少

場景中數(shù)據(jù)處理所需要的不同類型計算能力都可以通過MPP數(shù)據(jù)庫實(shí)現(xiàn)，無需多個組件同時使用，資源使用更少。

除了具備以上特點(diǎn)，MPP數(shù)據(jù)庫還具備“三個減少”優(yōu)勢：由于數(shù)據(jù)的處理和開放使用都使用標(biāo)準(zhǔn)SQL，可以減少數(shù)據(jù)使用層的開發(fā)成本；使用交易數(shù)據(jù)庫的恢復(fù)技術(shù)實(shí)現(xiàn)數(shù)據(jù)的可靠存儲，可減少由于數(shù)據(jù)故障產(chǎn)生的維護(hù)成本；在存儲典型的人臉、車輛等視圖數(shù)據(jù)時，歷史數(shù)據(jù)壓縮比可達(dá)5：1到10：1，減少數(shù)據(jù)存儲成本。

縱觀市場，從 2005年Michael Stonebraker首先提出了數(shù)據(jù)處理不再適合one size fits all的方案，到如今由于不同的數(shù)據(jù)和處理需求衍生出了DB-Engines排名中數(shù)百種數(shù)據(jù)處理產(chǎn)品，這些都足以說明不同的數(shù)據(jù)和不同的處理需求需要使用不同的數(shù)據(jù)處理方案。

未來已來

未來，隨著視頻圖像數(shù)據(jù)在更多行業(yè)中的深度應(yīng)用，數(shù)據(jù)處理將會衍生出更多的需求。人大金倉將持續(xù)以“客戶需求為中心”，利用自身過硬的技術(shù)實(shí)力和開放能力服務(wù)更多AI應(yīng)用場景，為客戶持續(xù)貢獻(xiàn)價值。