AI 视频分析识别系统技术分析
AI 視頻分析識別系統(tǒng)
關(guān)鍵字:AI視頻行為識別分析系統(tǒng)、AI視覺分析系統(tǒng)、AI圖像識別分析系統(tǒng)、AI識別系統(tǒng)、AI行為分析系統(tǒng)
- 概述
- 背景
????人工智能大時代背景下，視頻應(yīng)用領(lǐng)域相關(guān)的行業(yè)應(yīng)用方式已經(jīng)發(fā)生了深刻的變化，各論安防監(jiān)控還是各類垂直行業(yè)視頻應(yīng)用，都需要AI視覺分析與識別技術(shù)助力，而且需求廣泛而迫切。在應(yīng)用層面，以AI分析識別技術(shù)為核心，集傳統(tǒng)視頻監(jiān)控和行業(yè)相應(yīng)傳感器/預(yù)警等設(shè)備一并接入管理并相互聯(lián)動的一體化綜合管理成了剛性應(yīng)用需求，由此，深圳融合永道科技有限公司早在2012年就已以此方向，研發(fā)新一代AI智能視頻一體化平臺軟件，深挖行業(yè)需求，響應(yīng)時代號角，向AI領(lǐng)域進軍。
????本平臺在我司AI-MIS分析識別算法中間件為核心的技術(shù)框架下,以AI人工智能機器視覺技術(shù)為支撐，以AI視頻應(yīng)用為核心，把實現(xiàn)客戶需求為目標(biāo)。細化應(yīng)用規(guī)則，在良好的橫向業(yè)務(wù)應(yīng)用規(guī)則擴展支持的同時，又重視縱向的技術(shù)深度化研發(fā)。持續(xù)研發(fā)適配更多的場景業(yè)務(wù)，為社會治安治理、保障安全生產(chǎn)提供有力的技術(shù)手段。
- 系統(tǒng)架構(gòu)
2.1 系統(tǒng)網(wǎng)絡(luò)拓樸圖
2.1.1 局域網(wǎng)模式典型應(yīng)用
?
備注: 本模式為局域網(wǎng)環(huán)境下典型應(yīng)用，所有設(shè)備都接入在同一個局域網(wǎng)下,AI系統(tǒng)服務(wù)器可以接入各式各品牌的網(wǎng)絡(luò)攝像頭和硬盤錄像機，也可以對接一些報警設(shè)備和傳感器設(shè)行。
客戶端管理電腦登錄連接主服務(wù)器，在客戶端軟件用戶界面統(tǒng)一管理系統(tǒng)。
??????一臺主AI服務(wù)器支持接入多臺從AI服務(wù)器，實現(xiàn)堆疊接入管理，便于系統(tǒng)擴容。
2.1.2 多分部本地AI系統(tǒng)互聯(lián)網(wǎng)應(yīng)用
?
備注: 本模式為多個分散在各地的分部AI系統(tǒng)，將報警事件統(tǒng)一上傳云平臺，通過IE客戶端連接云服務(wù)器訪問，本地AI系統(tǒng)架構(gòu)為局域網(wǎng)模式，只要將本地AI服務(wù)器設(shè)置指向云管理服務(wù)器地址信息即可完成聯(lián)網(wǎng)。本模式特點：兩級架色，本地局部單元系統(tǒng)（本地運算),中心系統(tǒng)統(tǒng)一所有分部的本地系統(tǒng)的接警記錄
2.1.3 互聯(lián)網(wǎng)/大型多級局域網(wǎng)后臺分析模式
?
備注:
2.2 AI-MIS算法中間件
2.2.1 AI-MIS算法中間件簡介
?????AI-MIS采用人工智能機器視覺“深度學(xué)習(xí)”技術(shù)底層架構(gòu)，結(jié)合應(yīng)用級算法，采用組件化設(shè)計，方便擴展算法類型，同時具備強大的樣本處理能力，樣本自動化生產(chǎn)標(biāo)簽?zāi)芰?#xff0c;可以高效研發(fā)新算法組件。
2.2.2 算法模塊
| 序號 | 名稱 | 備注 |
| 1 | 對象類別識別能力 | 人,跌倒的人,吸煙,眼鏡,背包,安全帶,反光衣,帽子,廚師帽,安全帽,手機,口罩,手提包,路面坑洞,蒙面,人臉正面,人臉側(cè)面,舉手,持刀,持槍,持棍,小汽車,自行車,摩托車,面包車,大客車,中巴車,火車,出租車標(biāo)志,挖掘機,自卸貨車,灌式貨車,貨柜車,渣土車,飛機,風(fēng)箏,狗,貓,牛,馬,鳥,老鼠,蟑螂,壁虎,行李箱,打包箱,手,三輪車,輪椅,火,煙柱,蛇 |
| 2 | 拌線探測 | 本算法規(guī)則在視頻內(nèi)劃線，指定布控對象類別，系統(tǒng)檢測當(dāng)布控對象經(jīng)過線條時，觸發(fā)抓拍事件;對象長時間停留在線條上，則每隔N秒后觸發(fā)一次抓拍事件，由用戶指定檢測哪一種對象或多個對類別 本算法規(guī)則通常應(yīng)用于檢測某種對象經(jīng)過，如人員越界，車輛進出， 動物出入等。 ? |
| 3. | AB線探測 | 本算法規(guī)則在視頻內(nèi)劃兩條線，指定布控對象類別，系統(tǒng)檢測當(dāng)布控對象經(jīng)過A線條再經(jīng)過B線條時，觸發(fā)抓拍事件;反之則不觸發(fā) 本算法規(guī)則通常應(yīng)用移動方向要求的某種對象經(jīng)過，如人員越界，車輛進出， 動物出入，逆行，不按方向行駛等。 ? ? |
| 4 | 對象滯留偵測 | 本算法規(guī)則在視頻內(nèi)繪制一個矩形或多邊形布控區(qū)域，設(shè)定某種對象長時間滯留在布控區(qū)域內(nèi)(設(shè)定超過指定的N秒后)，產(chǎn)生抓拍事件 本算法規(guī)則通常應(yīng)用于周界預(yù)警，車輛違停，人員排徊 |
| 5 | 區(qū)域入侵偵測 | 本算法規(guī)則在視頻內(nèi)繪制一個矩形或多邊形布控區(qū)域，指定某種對象經(jīng)過布控區(qū)域內(nèi)，跟蹤并產(chǎn)生抓拍事件 ?本算法規(guī)則通常應(yīng)用于周界預(yù)警 |
| 6 | 對象移走探測 | 本算法規(guī)則在視頻內(nèi)繪制一個矩形或多邊形布控區(qū)域，設(shè)定必須有某種對象存在于布控區(qū)域內(nèi)，如果在設(shè)置的時間范求沒有檢測到該對象，則產(chǎn)生抓拍事件 本算法規(guī)則通常應(yīng)用于保安離崗或衛(wèi)兵離崗、貴重物品看護 |
| 7 | 進入AB區(qū)域探測 | 本算法規(guī)則在視頻內(nèi)繪制兩個區(qū)域，指定布控對象類別，系統(tǒng)檢測當(dāng)布控對象經(jīng)過A區(qū)再經(jīng)過B區(qū)時，觸發(fā)抓拍事件;反之則不觸發(fā) 本算法規(guī)則通常應(yīng)用移動方向要求的某種對象經(jīng)過，如人員越界，車輛違規(guī)變道，不按方向行駛、逆行等。 |
| 8 | 人群聚集探測 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域，設(shè)置區(qū)域內(nèi)人數(shù)超過N人時，產(chǎn)生人群聚集抓拍事件 |
| 9 | 車輛擁堵探測 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域，設(shè)置區(qū)域內(nèi)車輛數(shù)量超過N時，產(chǎn)生車輛擁堵抓拍事件 |
| 10 | 區(qū)域人流統(tǒng)計 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,跟蹤進入?yún)^(qū)域的人員，當(dāng)人員離開區(qū)域時產(chǎn)生一次抓拍記數(shù)事件 本算法規(guī)則應(yīng)用于區(qū)域性人數(shù)統(tǒng)計 ? |
| 11 | 有人跌倒 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,跟蹤進入?yún)^(qū)域的人員，當(dāng)人員在區(qū)域內(nèi)跌倒時產(chǎn)生一次抓拍事件 本算法規(guī)則通常應(yīng)用于敬老院、社區(qū)、看護老人是否跌倒預(yù)警。 |
| 12 | 對象靜止探測【警門睡崗】 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,跟蹤進入?yún)^(qū)域的人員，當(dāng)人員處于靜止?fàn)顟B(tài)時產(chǎn)生一次抓拍事件 本算法規(guī)則通常應(yīng)用于識別警/門衛(wèi)是否正在睡覺的行為 |
| 13 | 煙火探測 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,識別布控區(qū)域內(nèi)產(chǎn)生火苗或煙柱時產(chǎn)生抓拍事件 本算法規(guī)則通常應(yīng)用于消防安全場所 |
| 14 | 打電話 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,識別布控區(qū)域內(nèi)人員打電話時產(chǎn)生抓拍事件 本算法規(guī)則通常應(yīng)用于石油化工，防止打電話時的無線電流觸發(fā)火災(zāi); 另外防止一些安全生產(chǎn)區(qū)域，防止員工因打電話造成安全事故 ? |
| 15 | 未戴安全帽識別 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,識別布控區(qū)域內(nèi)人員未戴安全帽時產(chǎn)生抓拍事件 本算法規(guī)則通常應(yīng)用于工地、安全生產(chǎn)車間，防止員工戴安全帽，以免引發(fā)安全事故 |
| 16 | 對象快速移動探測 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,識別布控區(qū)域內(nèi)人員快速移動時產(chǎn)生抓拍事件 本算法規(guī)則通常應(yīng)用于監(jiān)獄，當(dāng)有人快速移動時，及時預(yù)警 |
| 17 | 黑名單人臉識別預(yù)警 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,識別布控區(qū)域內(nèi)人員是否為黑名單人員，如果為黑名單人員則產(chǎn)生抓拍事件，及時預(yù)警通知安全人員處置等 本算法規(guī)則通常應(yīng)用于單位或社區(qū)，或公安布控,及時發(fā)現(xiàn)黑名單人員便于工作人員及時處置 |
| 18 | 人車識別跟蹤 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,跟蹤識別進入?yún)^(qū)域內(nèi)的人員(人臉識別)和車輛(車牌識別),產(chǎn)生抓拍事件 本算法規(guī)則應(yīng)用多攝像頭人員或車輛跨鏡軌跡跟蹤 |
| 19 | 出入人流計數(shù) | 本算法規(guī)則是在視頻內(nèi)繪制兩條線，即A線和B線，當(dāng)人員從A線再到B線時，觸發(fā)一次人流計數(shù)抓拍事件，通常應(yīng)用于具有方向性的人流計數(shù)統(tǒng)計場所 |
| 20 | 未戴手套識別 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,識別布控區(qū)域內(nèi)人員未戴手套時產(chǎn)生抓拍事件 本算法規(guī)則通常應(yīng)用于需要戴手套的工作場景，防止員工不戴手套，以免影響衛(wèi)生或其它安全事件 |
| 21 | 吸煙識別 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,識別布控區(qū)域內(nèi)人員吸煙時產(chǎn)生抓拍事件 本算法規(guī)則通常應(yīng)用于消防安全場所 |
| 22 | 有人持刀識別 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,識別布控區(qū)域內(nèi)人員有人持刀時產(chǎn)生抓拍事件,及時預(yù)警 本算法規(guī)則通常應(yīng)用于校園安全監(jiān)控 |
| 23 | 未戴口罩識別 | 本算法規(guī)則在視頻內(nèi)繪制區(qū)域,識別布控區(qū)域內(nèi)人員未戴口罩時產(chǎn)生抓拍事件 本算法規(guī)則通常應(yīng)用于廚房或其它需要戴口罩的工作場景，防止員工不戴口罩，以免影響廚房衛(wèi)生或其它安全事件 |
| 24 | 未戴廚師帽識別 | 算法規(guī)則在視頻內(nèi)繪制區(qū)域,識別布控區(qū)域內(nèi)人員未戴廚師帽時產(chǎn)生抓拍事件 本算法規(guī)則通常應(yīng)用于廚房工作場景，防止員工不戴廚師帽，以免影響廚房衛(wèi)生環(huán)境 |
| 25 | 外來人員人臉識別 | 算法規(guī)則在視頻內(nèi)繪制區(qū)域,識別布控區(qū)域內(nèi)人員不是內(nèi)部人員時產(chǎn)生抓拍事件 本算法規(guī)則通常應(yīng)用于單位或社區(qū)，防止閑雜人員進入 |
| 26 | 白名單人臉識別 | 算法規(guī)則在視頻內(nèi)繪制區(qū)域,識別布控區(qū)域內(nèi)人員是否為內(nèi)部人員，如果為內(nèi)部人員則出入口通行放行、聯(lián)動開門、考勤記錄、會議簽到等 本算法規(guī)則通常應(yīng)用于單位或社區(qū)，防止閑雜人員進入 |
| 27 | 打架行為識別 | 本算法規(guī)則支持識別有人打架行為，及時預(yù)警 |
| 28 | 未穿反光衣識別 | 檢測人員是否穿反光衣,或同行人中是否有人穿反光衣 |
| 29 | 未戴安全帶識別 | 檢測人員是否未戴安全帶 |
| 30 | 石油石化工人工服識別 | 檢測人員是否有穿工裝，目前只支持中石油中石化工人工服識別 |
| 31 | 騎車不戴頭盔 | 支持檢測騎自行車、電動車、三輪車的人員未戴頭盔 |
| 32 | 舉手求救 | 支持檢測人員舉手方式發(fā)出求救信號 |
| 33 | 貨車違規(guī)載人 | 支持檢測各類貨車違規(guī)載人，或家用三輪車載人抓拍 |
| 34 | 汽車車牌識別 | 支持各種汽車號牌識別，兼容新能源汽車車牌識別,兼容香港車牌識別 |
| 35 | 兩輪電動自動車車牌識別 | 支持各種自動摩托車/自行車白牌、黃牌、藍牌號牌識別 |
| 36 | 人數(shù)限定 | 支持設(shè)置視頻場景內(nèi)小于指定的人數(shù)參預(yù)警或大于指定的人數(shù)預(yù)警 |
2.2.3 算法定制能力
?????AI-MIS中間件采用組件化架構(gòu)，因此具有強大的可擴展性，完備的生產(chǎn)工具組件，使得AI-MIS中間件可以支持快速的定制新業(yè)務(wù)算法，在不需要太多改動上層業(yè)務(wù)代碼的情況下，高效的研發(fā)和訓(xùn)練生產(chǎn)新型算法規(guī)則。
2.3 系統(tǒng)環(huán)境說明
?????本系統(tǒng)采用跨平臺主式編寫底層算法，和上層應(yīng)用軟件，理論上可以適配支持任何操作系統(tǒng)，目前經(jīng)過測試的操作系統(tǒng)為ubuntu 18.04 和Windows 7/8/10/12/16 ,本系統(tǒng)數(shù)據(jù)庫為了更好的適配算法，提高查詢速度和大數(shù)據(jù)存儲，采用了自研數(shù)據(jù)庫 AIDB。
- 功能模塊
3.1 實時預(yù)覽
3.1.1 AI通道實時預(yù)覽
?????客戶端預(yù)覽功能界面，支持實時預(yù)覽AI節(jié)點通道實時視頻，該視頻帶有分析疊加效果，支持云臺控制、支持預(yù)置位管理、捕圖、畫面雙擊放大、全屏等操作。
3.1.2 監(jiān)控通道實時預(yù)覽
客戶端預(yù)覽功能界面，支持實時預(yù)覽監(jiān)控攝像頭節(jié)點通道實時視頻，該視頻不帶有分析疊加效果，支持云臺控制、支持預(yù)置位管理、捕圖、畫面雙擊放大、全屏等操作。
?
3.1.3 視圖管理
????在客戶端預(yù)覽功能界面內(nèi)，支持將已經(jīng)打開的視頻保存為視圖模板，支持創(chuàng)建9999個視圖，可以設(shè)定客戶端啟動后自動加載模板。
3.1.4 云臺控制
????在客戶端預(yù)覽功能界面內(nèi)，支持將已經(jīng)打開的視頻進行云臺操作，默認支持向左、向左、向上、向上、左上、右上、左下、右下、拉遠、拉近、轉(zhuǎn)到預(yù)置位等操作，支持創(chuàng)建自動定時執(zhí)行預(yù)置位計劃。
3.2 數(shù)據(jù)查詢
????客戶端具有數(shù)據(jù)查詢功能界面，支持選中某個通道、事件類型、時間范圍查詢系統(tǒng)智能抓拍通道產(chǎn)生的報警抓拍數(shù)據(jù)，支持將查詢到的數(shù)據(jù)(含圖片)下載到客戶端 本地磁盤。
3.3 統(tǒng)計分析
?????系統(tǒng)內(nèi)器海量統(tǒng)計分析模塊，自動計數(shù)每一種事件類型數(shù)據(jù)，統(tǒng)計粒度最小單位為小時，支持按每日、月、年、時間段、通道等方式快速查詢統(tǒng)計數(shù)據(jù)。
3.4 檔案管理
系統(tǒng)支持人員檔案管理和車牌檔案管理，人員檔案管理主要應(yīng)用人臉識別黑白名單和訪客管理應(yīng)用，黑名單人員主要應(yīng)用于人臉識別發(fā)現(xiàn)黑名單人員預(yù)警，白名單人員主要應(yīng)用于單位內(nèi)部人員出入口通行管理、考勤和會議簽到管理。
車輛與號牌管理主要應(yīng)用于出入口車輛通行管理（不涉及收費）。
?
3.5 系統(tǒng)配置
在系統(tǒng)配置功能模塊內(nèi)，管理員用戶可以操作設(shè)置如下功能：
AI通道相應(yīng)的攝像頭及分析識別算法應(yīng)用規(guī)則
監(jiān)控通道相應(yīng)的攝像頭，及設(shè)置是否錄像等
上傳第三方平臺http協(xié)議配置
聯(lián)動郵件發(fā)送配置
系統(tǒng)維護操作（系統(tǒng)重啟、時間同步）
3.6 二次開發(fā)
?????本系統(tǒng)提從如下二次開發(fā)協(xié)議接口：
?
- 系統(tǒng)性能參數(shù)
| 序號 | 項目 | 備注 | ? |
| 1 | 系統(tǒng)用戶數(shù) | 最大支持9999個用戶同時在線 | ? |
| 2 | 事件記錄最大數(shù)量 | 最大支持1024億條記錄存儲，查詢響應(yīng)速度不高于3秒 | ? |
| 3 | AI服務(wù)器堆疊數(shù)量 | 支持1024臺AI服務(wù)器 | ? |
| 4 | 監(jiān)控攝像頭接入數(shù)量 | 最大支持900000個監(jiān)控攝像頭 | ? |
| 5 | 抓拍事件接收時間 | 少于1秒 | ? |
| 6 | 單個AI通道疊加分析規(guī)則數(shù)量 | 最大可同時添加16個算法同時運算 | ? |
| 7 | ? | ? | ? |
??
歡迎電話聯(lián)系，一起交流 AI行為分析系統(tǒng)技術(shù)開發(fā)事宜 TEL&WX: 13570895778
?
?
?
總結(jié)
以上是生活随笔為你收集整理的AI 视频分析识别系统技术分析的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。
- 上一篇： CAD 卸载工具，完美彻底卸载清除干净c
- 下一篇： bilibili go框架_最好的开发语