yuv格式转换是那个组织定义的_AI 如何赋能摄像机?这场沙龙为你解锁“软件定义”新概念...
在數字經濟的發展中,數據基礎設施將發揮關鍵支撐作用,機器視覺是數據基礎設施非常重要的一環。當前 65% 的行業數字化信息來自視頻,可見機器視覺與生活、娛樂、通信、生產、安全的深度結合下,一個千億美元的巨型市場正在緩緩浮出水面。在此背景下,AI 賦能機器視覺無疑將會加快這一進程。在此過程中,開發者和企業如何把握住發展先機?這場沙龍為你解鎖答案。
11 月 28 日,華為機器視覺與 InfoQ 聯合舉辦的 DevRun 開發者沙龍 華為機器視覺技術公開課 - 成都專場,在成都人才綜合服務中心·逐夢廳成功舉辦。活動現場,華為機器視覺多位資深技術專家從實踐出發,就攝像機 App 開發、攝像機 AI 模型轉換與精度分析、攝像機 AI 模型部署與推理等幾個維度展開深度分享,為現場開發者們解讀更多算法開發實踐以及軟件定義攝像機的特點和功能。除了精彩的主題分享外,華為機器視覺的各位專家還與參會者一同進行了在線實操。
圖 / 現場合影
1 解鎖軟件定義攝像機概念,如何輕松玩轉攝像機 App 開發?活動伊始,華為機器視覺 SDC OS 架構師陳偉帶來了兩大主題演講。在《探索·軟件定義攝像機》演講中,陳偉向大家解讀了軟件定義攝像機的概念及背景。他表示,SDC(Software-Defined Camera)是為了滿足復雜場景的需求而誕生的,在此需求下,攝像機從單一功能的終端變成了多應用聚合的平臺,華為也由此提出了“軟件定義”的理念。
圖 / 陳偉
陳偉表示,在硬件定義時代,降低制造的復雜度和成本是關鍵目的,但隨著靈活性、自動化、多樣化、個性化定制的需求日益增長,由軟件來操控硬件資源的情況將越來越多、越來越廣。智能化時代下,軟件定義將成為攝像機未來發展的主要方向。
他進一步解釋道,相較傳統攝像機因軟硬件綁定而產生的應用局限性,華為首創的軟件定義攝像機理念,明確三大核心標準暨擁有專業 AI 芯片、開放的攝像機 OS、開放的算法和應用生態,采用智能算法與硬件底座分離的設計理念,在硬件底座算力充足的情況,通過對攝像機前端算法的不斷在線迭代與自主學習實現一次硬件投資、全生命周期內算法可持續增長。
在接下來的《輕松玩轉攝像機 App 開發》主題演講中,陳偉更加深入地向與會開發者展示了攝像機 App 開發的相關知識點。他首先闡述了軟件定義攝像機的軟件架構設計理念,在端側產品中大量引用了微服務設計理念,以此實現了軟硬件之間、軟件和業務特性之間以及應用之間的解耦,通過微服務來按需加載和任意組合,從而提供多種可能。此外,他還就 SDC OS 服務化接口消息規范、SDC App 開發和發布流程等幾個方面進行了相關講解。
演講最后,陳偉以 Demo 演示進行了軟件定義攝像機軟件應用的安裝和配置講解,包括對代碼量級的展示,助力開發者快速將理論知識轉化為實踐技能。他表示,大趨勢下,華為也在不斷豐富自身產品, 面向不同的行業、不同的算法性能要求,提供豐富的產品供開發者基于硬件做軟件開發,他呼吁開發者能夠加入華為軟件定義攝像機生態大軍中,共同進步和成長。
2 解密攝像機 AI 模型轉換與精度分析,落地攝像機 AI 模型部署與推理實踐就開發者感興趣的攝像機 AI 模型轉換與精度分析、AI 模型部署的相關問題,華為機器視覺智能算法專家劉琳在接下來的兩場演講中也一一作了分析和解讀。
圖 / 劉琳
劉老師首先進行了《攝像機 AI 模型轉換與精度分析》的主題分享。她認為在三大特性——軟硬件解耦、在線按需加載、持續迭代演進的加持下,軟件定義攝像機將承載無限可能。隨后她從模型訓練、模型轉換(量化)、模型部署,以及其支持的網絡結構在標準層、擴展層、其它層的模型轉換方式和參數配置等幾個方面,向現場開發者解讀了軟件定義攝像機 AI 算法開發流程。
就開發者關心的精度損失問題,她也做了詳盡分析,在模型的優化層面給出了一些建議。在預處理方式問題上,她提出可采用輕量級網絡、模型剪枝技術,減少模型計算量;在量化誤差問題的處理中,可將每層參數配置與硬件匹配 Channel 數盡量和 4 對齊,width 數最好和 16 對齊;在層匹配問題上,可通過 inplace 方式將 Conv 后接 BN 層、RelU 層;在后處理問題上,Eltwise / Softmax / Reshape / Permute / Upsample 等層最好使用 NNIE 的實現方式,以此提高 NNIE 利用率。
在《攝像機 AI 模型部署與推理實踐》的主題演講中,劉老師對 SDC ?App 程序處理流程、SDC 模型轉換和 App 開發基本問題排查方法等維度進行了解讀分享。在 SDC ?App 程序處理流程中,如果要實現算法 App,則需要關注加載模型、卸載模型,然后做向前處理和訂閱 YUV 數據,使用這四個服務就可以實現 App 的主體流程。
針對 App 開發基本問題如何排查這一問題,劉老師提出 5 步排查法,從 CaffeModel 、模型使用網絡層、Caffe 、Blob 、模型輸出等 5 個維度進行問題排查。此外,她還從實踐出發,向現場開發者解答了如何應對掉點、漏檢、誤檢、精度下降等問題。
3 如何加入華為機器視覺開發者社區?隨后,華為機器視覺開發者社區運營經理譚義鑫從社區論壇、生態開放實驗室、賦能培訓、職業認證及開發者活動五個方面詳細介紹了華為機器視覺開發者社區。作為一個知識分享與技術交流平臺,華為機器視覺開發者社區包含論壇、博客、云學院、在線賦能、技術支持等板塊,開發者可以在社區中進行資料查找、技術交流、問題求助,還可以參加社區舉辦的培訓賦能活動,共同攜手推進機器視覺行業的未開發展。
圖 / 譚義鑫
此外,機器視覺開發者社區中還包括生態開放實驗室,目前在杭州、北京、成都、深圳等地均有布局,實驗室具備低門檻、使用便捷、可在線申請、設備多樣化等幾大特色,提供包括 HoloSens IVS3800、HoloSens IVS1800、HoloSens SDC 等多種機器視覺相關產品,為開發者“0”成本創新做底層支撐。同時社區還會為開發者提供職業認證,包含 HCIA、HCIP、HCIE 三種等級,分別對應工程師、高級工程師和專家級別,成就開發者的技術能力進階。
活動最后的大咖面對面環節中,現場開發者與華為的專家就機器視覺的相關問題展開討論,共同探索軟件定義攝像機的未來發展方向,現場學習氛圍異常高漲。
圖 / 現場討論
本次 DevRun 開發者沙龍 華為機器視覺技術公開課成都專場圓滿落幕,在華為專家的精彩講解下,豐富的演講內容為現場開發者帶來了一場豐盛的知識盛宴,解鎖了軟件定義攝像機的更多技術干貨。聚眾同行,聚力創新,未來華為機器視覺還將在各地舉辦各類技術沙龍活動,持續展開技術布道,以生態之力普惠更多開發者。
下期預告DevRun 開發者沙龍 華為機器視覺技術公開課 將于 12 月 12 日走進珠海,為珠海及周邊城市的開發者們帶來更多福利,可添加小助手微信【Sherry25101】了解活動詳情。下一站,我們珠海見!
總結
以上是生活随笔為你收集整理的yuv格式转换是那个组织定义的_AI 如何赋能摄像机?这场沙龙为你解锁“软件定义”新概念...的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 转账立马退回显示冲正存入
- 下一篇: Adobe AIR for html/j