在數(shù)字經(jīng)濟(jì)的發(fā)展中，數(shù)據(jù)基礎(chǔ)設(shè)施將發(fā)揮關(guān)鍵支撐作用，機(jī)器視覺是數(shù)據(jù)基礎(chǔ)設(shè)施非常重要的一環(huán)。當(dāng)前 65% 的行業(yè)數(shù)字化信息來(lái)自視頻，可見機(jī)器視覺與生活、娛樂(lè)、通信、生產(chǎn)、安全的深度結(jié)合下，一個(gè)千億美元的巨型市場(chǎng)正在緩緩浮出水面。在此背景下，AI 賦能機(jī)器視覺無(wú)疑將會(huì)加快這一進(jìn)程。在此過(guò)程中，開發(fā)者和企業(yè)如何把握住發(fā)展先機(jī)？這場(chǎng)沙龍為你解鎖答案。

11 月 28 日，華為機(jī)器視覺與 InfoQ 聯(lián)合舉辦的 DevRun 開發(fā)者沙龍 華為機(jī)器視覺技術(shù)公開課 - 成都專場(chǎng)，在成都人才綜合服務(wù)中心·逐夢(mèng)廳成功舉辦。活動(dòng)現(xiàn)場(chǎng)，華為機(jī)器視覺多位資深技術(shù)專家從實(shí)踐出發(fā)，就攝像機(jī) App 開發(fā)、攝像機(jī) AI 模型轉(zhuǎn)換與精度分析、攝像機(jī) AI 模型部署與推理等幾個(gè)維度展開深度分享，為現(xiàn)場(chǎng)開發(fā)者們解讀更多算法開發(fā)實(shí)踐以及軟件定義攝像機(jī)的特點(diǎn)和功能。除了精彩的主題分享外，華為機(jī)器視覺的各位專家還與參會(huì)者一同進(jìn)行了在線實(shí)操。

圖 / 現(xiàn)場(chǎng)合影

1 解鎖軟件定義攝像機(jī)概念，如何輕松玩轉(zhuǎn)攝像機(jī) App 開發(fā)？

活動(dòng)伊始，華為機(jī)器視覺 SDC OS 架構(gòu)師陳偉帶來(lái)了兩大主題演講。在《探索·軟件定義攝像機(jī)》演講中，陳偉向大家解讀了軟件定義攝像機(jī)的概念及背景。他表示，SDC(Software-Defined Camera)是為了滿足復(fù)雜場(chǎng)景的需求而誕生的，在此需求下，攝像機(jī)從單一功能的終端變成了多應(yīng)用聚合的平臺(tái)，華為也由此提出了“軟件定義”的理念。

圖 / 陳偉

陳偉表示，在硬件定義時(shí)代，降低制造的復(fù)雜度和成本是關(guān)鍵目的，但隨著靈活性、自動(dòng)化、多樣化、個(gè)性化定制的需求日益增長(zhǎng)，由軟件來(lái)操控硬件資源的情況將越來(lái)越多、越來(lái)越廣。智能化時(shí)代下，軟件定義將成為攝像機(jī)未來(lái)發(fā)展的主要方向。

他進(jìn)一步解釋道，相較傳統(tǒng)攝像機(jī)因軟硬件綁定而產(chǎn)生的應(yīng)用局限性，華為首創(chuàng)的軟件定義攝像機(jī)理念，明確三大核心標(biāo)準(zhǔn)暨擁有專業(yè) AI 芯片、開放的攝像機(jī) OS、開放的算法和應(yīng)用生態(tài)，采用智能算法與硬件底座分離的設(shè)計(jì)理念，在硬件底座算力充足的情況，通過(guò)對(duì)攝像機(jī)前端算法的不斷在線迭代與自主學(xué)習(xí)實(shí)現(xiàn)一次硬件投資、全生命周期內(nèi)算法可持續(xù)增長(zhǎng)。

在接下來(lái)的《輕松玩轉(zhuǎn)攝像機(jī) App 開發(fā)》主題演講中，陳偉更加深入地向與會(huì)開發(fā)者展示了攝像機(jī) App 開發(fā)的相關(guān)知識(shí)點(diǎn)。他首先闡述了軟件定義攝像機(jī)的軟件架構(gòu)設(shè)計(jì)理念，在端側(cè)產(chǎn)品中大量引用了微服務(wù)設(shè)計(jì)理念，以此實(shí)現(xiàn)了軟硬件之間、軟件和業(yè)務(wù)特性之間以及應(yīng)用之間的解耦，通過(guò)微服務(wù)來(lái)按需加載和任意組合，從而提供多種可能。此外，他還就 SDC OS 服務(wù)化接口消息規(guī)范、SDC App 開發(fā)和發(fā)布流程等幾個(gè)方面進(jìn)行了相關(guān)講解。

演講最后，陳偉以 Demo 演示進(jìn)行了軟件定義攝像機(jī)軟件應(yīng)用的安裝和配置講解，包括對(duì)代碼量級(jí)的展示，助力開發(fā)者快速將理論知識(shí)轉(zhuǎn)化為實(shí)踐技能。他表示，大趨勢(shì)下，華為也在不斷豐富自身產(chǎn)品， 面向不同的行業(yè)、不同的算法性能要求，提供豐富的產(chǎn)品供開發(fā)者基于硬件做軟件開發(fā)，他呼吁開發(fā)者能夠加入華為軟件定義攝像機(jī)生態(tài)大軍中，共同進(jìn)步和成長(zhǎng)。

2 解密攝像機(jī) AI 模型轉(zhuǎn)換與精度分析，落地?cái)z像機(jī) AI 模型部署與推理實(shí)踐

就開發(fā)者感興趣的攝像機(jī) AI 模型轉(zhuǎn)換與精度分析、AI 模型部署的相關(guān)問(wèn)題，華為機(jī)器視覺智能算法專家劉琳在接下來(lái)的兩場(chǎng)演講中也一一作了分析和解讀。

圖 / 劉琳

劉老師首先進(jìn)行了《攝像機(jī) AI 模型轉(zhuǎn)換與精度分析》的主題分享。她認(rèn)為在三大特性——軟硬件解耦、在線按需加載、持續(xù)迭代演進(jìn)的加持下，軟件定義攝像機(jī)將承載無(wú)限可能。隨后她從模型訓(xùn)練、模型轉(zhuǎn)換(量化)、模型部署，以及其支持的網(wǎng)絡(luò)結(jié)構(gòu)在標(biāo)準(zhǔn)層、擴(kuò)展層、其它層的模型轉(zhuǎn)換方式和參數(shù)配置等幾個(gè)方面，向現(xiàn)場(chǎng)開發(fā)者解讀了軟件定義攝像機(jī) AI 算法開發(fā)流程。

就開發(fā)者關(guān)心的精度損失問(wèn)題，她也做了詳盡分析，在模型的優(yōu)化層面給出了一些建議。在預(yù)處理方式問(wèn)題上，她提出可采用輕量級(jí)網(wǎng)絡(luò)、模型剪枝技術(shù)，減少模型計(jì)算量；在量化誤差問(wèn)題的處理中，可將每層參數(shù)配置與硬件匹配 Channel 數(shù)盡量和 4 對(duì)齊，width 數(shù)最好和 16 對(duì)齊；在層匹配問(wèn)題上，可通過(guò) inplace 方式將 Conv 后接 BN 層、RelU 層；在后處理問(wèn)題上，Eltwise / Softmax / Reshape / Permute / Upsample 等層最好使用 NNIE 的實(shí)現(xiàn)方式，以此提高 NNIE 利用率。

在《攝像機(jī) AI 模型部署與推理實(shí)踐》的主題演講中，劉老師對(duì) SDC ?App 程序處理流程、SDC 模型轉(zhuǎn)換和 App 開發(fā)基本問(wèn)題排查方法等維度進(jìn)行了解讀分享。在 SDC ?App 程序處理流程中，如果要實(shí)現(xiàn)算法 App，則需要關(guān)注加載模型、卸載模型，然后做向前處理和訂閱 YUV 數(shù)據(jù)，使用這四個(gè)服務(wù)就可以實(shí)現(xiàn) App 的主體流程。

針對(duì) App 開發(fā)基本問(wèn)題如何排查這一問(wèn)題，劉老師提出 5 步排查法，從 CaffeModel 、模型使用網(wǎng)絡(luò)層、Caffe 、Blob 、模型輸出等 5 個(gè)維度進(jìn)行問(wèn)題排查。此外，她還從實(shí)踐出發(fā)，向現(xiàn)場(chǎng)開發(fā)者解答了如何應(yīng)對(duì)掉點(diǎn)、漏檢、誤檢、精度下降等問(wèn)題。

3 如何加入華為機(jī)器視覺開發(fā)者社區(qū)？

隨后，華為機(jī)器視覺開發(fā)者社區(qū)運(yùn)營(yíng)經(jīng)理譚義鑫從社區(qū)論壇、生態(tài)開放實(shí)驗(yàn)室、賦能培訓(xùn)、職業(yè)認(rèn)證及開發(fā)者活動(dòng)五個(gè)方面詳細(xì)介紹了華為機(jī)器視覺開發(fā)者社區(qū)。作為一個(gè)知識(shí)分享與技術(shù)交流平臺(tái)，華為機(jī)器視覺開發(fā)者社區(qū)包含論壇、博客、云學(xué)院、在線賦能、技術(shù)支持等板塊，開發(fā)者可以在社區(qū)中進(jìn)行資料查找、技術(shù)交流、問(wèn)題求助，還可以參加社區(qū)舉辦的培訓(xùn)賦能活動(dòng)，共同攜手推進(jìn)機(jī)器視覺行業(yè)的未開發(fā)展。

圖 / 譚義鑫

此外，機(jī)器視覺開發(fā)者社區(qū)中還包括生態(tài)開放實(shí)驗(yàn)室，目前在杭州、北京、成都、深圳等地均有布局，實(shí)驗(yàn)室具備低門檻、使用便捷、可在線申請(qǐng)、設(shè)備多樣化等幾大特色，提供包括 HoloSens IVS3800、HoloSens IVS1800、HoloSens SDC 等多種機(jī)器視覺相關(guān)產(chǎn)品，為開發(fā)者“0”成本創(chuàng)新做底層支撐。同時(shí)社區(qū)還會(huì)為開發(fā)者提供職業(yè)認(rèn)證，包含 HCIA、HCIP、HCIE 三種等級(jí)，分別對(duì)應(yīng)工程師、高級(jí)工程師和專家級(jí)別，成就開發(fā)者的技術(shù)能力進(jìn)階。

活動(dòng)最后的大咖面對(duì)面環(huán)節(jié)中，現(xiàn)場(chǎng)開發(fā)者與華為的專家就機(jī)器視覺的相關(guān)問(wèn)題展開討論，共同探索軟件定義攝像機(jī)的未來(lái)發(fā)展方向，現(xiàn)場(chǎng)學(xué)習(xí)氛圍異常高漲。

圖 / 現(xiàn)場(chǎng)討論

本次 DevRun 開發(fā)者沙龍 華為機(jī)器視覺技術(shù)公開課成都專場(chǎng)圓滿落幕，在華為專家的精彩講解下，豐富的演講內(nèi)容為現(xiàn)場(chǎng)開發(fā)者帶來(lái)了一場(chǎng)豐盛的知識(shí)盛宴，解鎖了軟件定義攝像機(jī)的更多技術(shù)干貨。聚眾同行，聚力創(chuàng)新，未來(lái)華為機(jī)器視覺還將在各地舉辦各類技術(shù)沙龍活動(dòng)，持續(xù)展開技術(shù)布道，以生態(tài)之力普惠更多開發(fā)者。

下期預(yù)告

DevRun 開發(fā)者沙龍 華為機(jī)器視覺技術(shù)公開課 將于 12 月 12 日走進(jìn)珠海，為珠海及周邊城市的開發(fā)者們帶來(lái)更多福利，可添加小助手微信【Sherry25101】了解活動(dòng)詳情。下一站，我們珠海見！

總結(jié)

以上是生活随笔為你收集整理的yuv格式转换是那个组织定义的_AI 如何赋能摄像机？这场沙龙为你解锁“软件定义”新概念...的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。