AR公共安全及应急指挥中的应用 | TVP思享
導(dǎo)語(yǔ) |?AR(增強(qiáng)現(xiàn)實(shí))技術(shù)正在成為新一代基礎(chǔ)設(shè)施建設(shè)中的重要組成部分。營(yíng)銷、教育、娛樂、會(huì)展等行業(yè)已大量使用AR技術(shù)提升用戶體驗(yàn),獲得更好的傳播效果。制造業(yè)也正陸續(xù)采用AR技術(shù)應(yīng)用于設(shè)備巡檢、操作指導(dǎo)和遠(yuǎn)程協(xié)助等場(chǎng)景,提升效率、降低出錯(cuò)率。美軍一直重視AR技術(shù)在軍事上的應(yīng)用。計(jì)算機(jī)視覺技術(shù)+移動(dòng)互聯(lián)網(wǎng)通訊技術(shù)+人機(jī)交互,在公共安全領(lǐng)域也有著廣泛的應(yīng)用場(chǎng)景。本文是對(duì)TVP韓磊老師的直播演講整理,分享AR在公共安全及應(yīng)急指揮中的應(yīng)用?!窽VP思享」專欄,凝結(jié)大咖思考,匯聚專家分享,收獲全新思想,歡迎長(zhǎng)期關(guān)注。(編輯:云加社區(qū) 濤濤)
一、AR的概念與歷史
1. AR的概念
了解什么是AR(增強(qiáng)現(xiàn)實(shí)),不妨先來(lái)看一段視頻。
這段視頻來(lái)自電影《蜘蛛俠:英雄遠(yuǎn)征》。蜘蛛俠戴上了鋼鐵俠給他的眼鏡,上面裝載了一套叫做EDITH的系統(tǒng)。該系統(tǒng)可以調(diào)用全球?qū)儆谠摷瘓F(tuán)的軍事力量進(jìn)行攻擊。
雖然是科幻片,但這一幕場(chǎng)景很正確地講清楚了AR的概念。蜘蛛俠帶上眼鏡后,可以透過(guò)眼鏡看到人的身份,可以看到人們?cè)谕ㄓ嵕W(wǎng)絡(luò)里面的交流。甚至在后面的場(chǎng)景,可以調(diào)用無(wú)人機(jī)去作戰(zhàn)。看起來(lái)很科幻,但已經(jīng)切中了AR的一些本質(zhì)。
AR的本質(zhì)原理和VR不一樣。VR是完全制造一個(gè)沉浸式的虛擬世界,AR是在真實(shí)世界里疊加虛擬的數(shù)字化內(nèi)容。
在AR的生成過(guò)程中,首先要有一個(gè)攝像機(jī)獲取真實(shí)世界的視頻畫面,通過(guò)計(jì)算機(jī)的識(shí)別運(yùn)算,再做一些疊加的操作,最后通過(guò)渲染引擎重新呈現(xiàn)出來(lái)。這個(gè)過(guò)程幾乎是實(shí)時(shí)的。
整個(gè)流程里有輸入、輸出、計(jì)算三個(gè)環(huán)節(jié),有很多可用的設(shè)備。
在輸入的部分,可以用手機(jī)攝像頭、AR眼鏡攝像頭、其他PC攝像頭等,以及非視覺的采集工具,如紅外攝像頭、深度攝像頭、超聲波攝像頭......
所有這些視頻或者非視頻的視覺畫面,獲取后首先要通過(guò)一些計(jì)算:
第一部分:識(shí)別
識(shí)別人臉、識(shí)別手勢(shì)、識(shí)別人的動(dòng)作,識(shí)別一個(gè)人從A點(diǎn)到B點(diǎn)中間的軌跡,或者識(shí)別整個(gè)空間是怎樣構(gòu)成的。經(jīng)過(guò)運(yùn)算之后,從某種意義上已經(jīng)初步理解了要計(jì)算的對(duì)象,它的形象、動(dòng)作、意圖等。
第二部分:疊加數(shù)字信息
計(jì)算在識(shí)別對(duì)象的畫面上疊加什么樣的數(shù)字信息,也包括了渲染的環(huán)節(jié)在內(nèi)。
第三部分:輸出。
渲染完成后是輸出,在手機(jī)屏幕、眼鏡屏幕、其他屏幕上看到識(shí)別、疊加、渲染的效果。
在上文的視頻片段里,我們可以看到,蜘蛛俠在眼鏡中看見了輸出的畫面。但在別的場(chǎng)景里,可以用其他的設(shè)備,比如手機(jī)就有計(jì)算能力,也能輸出。除了AR app外,微信現(xiàn)在也支持AR。
對(duì)于眼鏡這樣的輸出形態(tài),可能不見得每一個(gè)朋友都親自體驗(yàn)過(guò)。來(lái)看看一臺(tái)分體式AR眼鏡的構(gòu)成:
該眼鏡用了安卓7.0系統(tǒng)。綜合其CPU、系統(tǒng)以及其他參數(shù),可以這樣理解:AR眼鏡幾乎就是一臺(tái)安卓手機(jī)。只不過(guò)它對(duì)輸入輸出部分,做了一些分解。還有一個(gè)重要的點(diǎn)是,眼鏡是橫屏顯示,而且具備3D顯示的能力。
圖片展示的這副眼鏡,屬于分體式的眼鏡。
AR眼鏡有兩個(gè)形態(tài),一種是一體式的眼鏡,把CPU、內(nèi)存、電池等等所有的運(yùn)算單元和操作單元都集成在眼鏡端。它的特點(diǎn)是比較酷,但是會(huì)比較重。
另一種是分體式眼鏡,把電池、cpu、內(nèi)存、硬盤等單元放到手持端,再通過(guò)一條線,和眼鏡端連接。
常常有一些合作伙伴問(wèn)我們:想要在眼鏡上做開發(fā)要具備什么樣的能力,需要哪些SDK或開發(fā)文檔?其實(shí)在沒有調(diào)用我們特有接口的情況下,如果想在AR眼鏡上做開發(fā),很多時(shí)候只需要具備安卓手機(jī)開發(fā)的能力就可以了。
增強(qiáng)現(xiàn)實(shí)技術(shù)是由計(jì)算機(jī)視覺和人機(jī)交互兩個(gè)部分組成的。
我們?cè)谡務(wù)撛鰪?qiáng)現(xiàn)實(shí)的時(shí)候,往往會(huì)過(guò)多強(qiáng)調(diào)計(jì)算機(jī)視覺,而忽略了人機(jī)交互。如果沒有人機(jī)交互,其實(shí)增強(qiáng)現(xiàn)實(shí)是不成立的。
為什么呢?因?yàn)槲覀儗?duì)現(xiàn)實(shí)的增強(qiáng)最后是要給人類來(lái)使用的。它是為了提供給人看見更多東西、做更多操作的能力而存在的。
所以判斷一個(gè)增強(qiáng)現(xiàn)實(shí)產(chǎn)品到底好不好,除了強(qiáng)大的識(shí)別算法以外,還要看它和人之間的交互達(dá)到什么樣的標(biāo)準(zhǔn)。
2. AR的歷史
回顧增強(qiáng)現(xiàn)實(shí)的歷史,先來(lái)看看硬件方面。
其實(shí)早在1960年左右,這個(gè)世界就已經(jīng)出現(xiàn)了第一臺(tái)增強(qiáng)現(xiàn)實(shí)的設(shè)備:sensorama。
它是一個(gè)實(shí)驗(yàn)室的設(shè)備,可以讓使用者透過(guò)屏幕看到立體幾何的圖形。
在之后的幾十年里一直有不同的設(shè)備出現(xiàn),也有很多人在不同領(lǐng)域做嘗試。
但直到1992年才有人真正把增強(qiáng)現(xiàn)實(shí)這個(gè)詞帶到世界上來(lái),這就是波音公司的工程師Thomas Caudell。他和他的同事在IEEE發(fā)表了一篇論文,討論增強(qiáng)現(xiàn)實(shí)技術(shù)是如何應(yīng)用在飛機(jī)裝配的過(guò)程。
波音飛機(jī)或者其他飛行器的裝備是非常復(fù)雜的,有成千上萬(wàn)條線束要對(duì)接,對(duì)錯(cuò)一個(gè)飛機(jī)都是要出問(wèn)題的。不管是用紙質(zhì)或者電子的說(shuō)明書,進(jìn)行裝配操作的指引,常常會(huì)發(fā)生錯(cuò)誤操作的情況。
Thomas Caudell就設(shè)想:如果讓工程師佩戴一副只能眼鏡,透過(guò)眼鏡去查看要裝備的對(duì)象,跟著眼鏡屏幕上頭出現(xiàn)的指引,讓工程師可以正確的裝配飛機(jī)的線束,從而變得非常高效和準(zhǔn)確。
他把這樣一種技術(shù)叫做Augmented Reality,也就是增強(qiáng)現(xiàn)實(shí)。
2014年谷歌推出一款智能眼鏡,或者說(shuō)是智能眼鏡的早期形態(tài)。它是單目的,也就是單個(gè)鏡片,還有一個(gè)攝像頭,構(gòu)成了整個(gè)機(jī)體的主要部分。當(dāng)然里頭還有運(yùn)算單元、電池等。
這樣一個(gè)產(chǎn)品,在2015年就被谷歌放棄了。當(dāng)然它涉及到的很多技術(shù)用在了谷歌其他的一些產(chǎn)品上,到現(xiàn)在也有類似這種形態(tài)的產(chǎn)品,但主要不是面向消費(fèi)者的,而是面向工業(yè)市場(chǎng)的。
當(dāng)時(shí),Google Glasses出來(lái)之后在業(yè)界引起了一陣熱潮,其實(shí)中國(guó)在AR眼鏡上沒有落后世界多大的距離,包括亮風(fēng)臺(tái)在內(nèi)的一系列國(guó)產(chǎn)廠商從2015年到現(xiàn)在,都有推出不同的頭戴式AR設(shè)備,和國(guó)外的友商大概是在一個(gè)水平線上,這一點(diǎn)是足夠我們AR從業(yè)者自豪的。
2016年,Microsoft Hololens產(chǎn)品橫空出世,在我看來(lái) Hololens直到現(xiàn)在,仍然是業(yè)界的標(biāo)桿產(chǎn)品。不管是顯示效果,還是提供的軟件能力,都堪稱標(biāo)桿,是我們學(xué)習(xí)的對(duì)象。
但Hololens的壞處是,它是一體式設(shè)備,佩戴起來(lái)會(huì)有一些不便,第二個(gè)是在中國(guó)用的時(shí)候會(huì)受到一些限制,這個(gè)話題就不展開講了。
AR在軟件方面的發(fā)展情況,主要分成兩部分,一個(gè)是應(yīng)用,一個(gè)是SDK。
應(yīng)用部分不用多說(shuō),市面上有很多,大家可能最有印象的是一款叫Pokemon Go精靈寶可夢(mèng)的游戲。
接下來(lái)講SDK方面,也就是我們開發(fā)者能夠拿來(lái)做自己應(yīng)用的框架和開發(fā)包。
最早的AR SDK是1999年一個(gè)日本人和他同事一起推出的ARToolKit。這一套套件目前仍然被很多人使用,它是開放源代碼的。
這是一個(gè)劃時(shí)代的產(chǎn)品,因?yàn)殚_發(fā)者不用從頭去做一切事情,可以用一個(gè)套件集成到自己的應(yīng)用就可以讓你的應(yīng)用具備識(shí)別二維圖像,并在上面疊加數(shù)字內(nèi)容等能力。
1999年,Intel帶頭做了一個(gè)套件叫OpenCV。CV指的是computer vision(計(jì)算機(jī)視覺),OpenCV顧名思義,它是一個(gè)開放的套件庫(kù)。
迄今為止,它某種意義上已經(jīng)成為業(yè)界的一個(gè)小的標(biāo)準(zhǔn)。很多開發(fā)者也在用它做自己的應(yīng)用,包括很多研究者也在用它做一些科研方面工作。
對(duì)業(yè)界具有標(biāo)志性意義的是:2017年蘋果發(fā)布Apple ARKit,和18年谷歌發(fā)布ARCore,這兩個(gè)AR SDK的發(fā)布為什么有重大的意義呢?
因?yàn)檫@兩個(gè)套件的發(fā)布意味著巨頭進(jìn)入到這個(gè)市場(chǎng)。也就是說(shuō),這個(gè)市場(chǎng)開始從最早期的探索階段,進(jìn)入到規(guī)模市場(chǎng)化的階段,因此我認(rèn)為這件事具有標(biāo)志性的意義。
事實(shí)也正是如此,18年之后,Facebook包括國(guó)內(nèi)的很多平臺(tái)廠商也進(jìn)入到AR市場(chǎng),整個(gè)市場(chǎng)的規(guī)模在不斷擴(kuò)大。
但從整個(gè)市場(chǎng)的發(fā)展趨勢(shì)來(lái)說(shuō),目前AR市場(chǎng)還是處于一個(gè)非常早期的階段。
二、AR的核心價(jià)值
AR到底給我們帶來(lái)什么,是單純好玩兒還是真的有些價(jià)值呢?
我認(rèn)為AR的核心的價(jià)值是:賦能于人。
像前文講到的,AR是關(guān)注人機(jī)交互的,而我認(rèn)為人和機(jī)器在未來(lái)世界里一定是共同進(jìn)化。而不是說(shuō)無(wú)人的一些先進(jìn)設(shè)備、機(jī)器人能完全替代人,人的創(chuàng)造性和計(jì)算機(jī)的智能性結(jié)合起來(lái),能夠獲得更大的一些能力。
具體來(lái)說(shuō)就是讓人能夠看見原本看不見的,看懂原來(lái)看不懂的,做原來(lái)做不到的事情。
三、AR在工業(yè)、營(yíng)銷等領(lǐng)域的應(yīng)用
1. AR在工業(yè)領(lǐng)域的典型應(yīng)用
工業(yè)的概念很大,不妨先聚焦在制造業(yè),那么AR在制造業(yè)主要用在哪幾個(gè)場(chǎng)景呢?
(1)操作指導(dǎo)
就像前面提到的波音公司使用AR眼鏡幫助工程師做線束對(duì)接或裝配的工作,基于識(shí)別技術(shù),讓工人能夠按圖索驥,做好維修和裝配的操作。
(2)遠(yuǎn)程協(xié)作
通過(guò)AR眼鏡,一線的工程師和遠(yuǎn)端專家可以實(shí)時(shí)的溝通,獲得一些指引。
(3)設(shè)備巡檢
當(dāng)你在巡檢某些設(shè)備或者產(chǎn)生的過(guò)程中,通過(guò)物聯(lián)網(wǎng)的傳感器或者計(jì)算機(jī)視覺的檢測(cè)結(jié)果,在AR眼鏡上直接可以看到某個(gè)機(jī)器哪些地方出了問(wèn)題。
我們之前做過(guò)一個(gè)跟物聯(lián)網(wǎng)結(jié)合的應(yīng)用,城市的管理人員戴上眼鏡在路上巡查的時(shí)候,能夠看到地面下管道的運(yùn)行狀況,比如供水、供電的狀況等,那么他是如何看到的呢?
是因?yàn)槲覀儚奈锫?lián)網(wǎng)的傳感器獲得了很多的信息,在AR眼鏡上呈現(xiàn)出來(lái),就像給地面照X光一樣。
2. AR在營(yíng)銷領(lǐng)域中的應(yīng)用
(1)包裝識(shí)別
如果各位平常留意的話,就會(huì)發(fā)現(xiàn)有時(shí)候用手機(jī)掃描商品包裝,界面上會(huì)浮現(xiàn)疊加的一些視頻動(dòng)畫,然后用戶可以領(lǐng)券,或者跳接到網(wǎng)店地址等,完成營(yíng)銷的閉環(huán),這是目前大家可能最常見的應(yīng)用。
(2)使用說(shuō)明書
比如現(xiàn)在有一些手機(jī)應(yīng)用,通過(guò)它們可以觀察到汽車的中控儀表盤等使用說(shuō)明。
(3)物聯(lián)網(wǎng)體驗(yàn)
比如,我們之前做過(guò)一個(gè)手機(jī)應(yīng)用,可以看到空調(diào)的風(fēng)是怎樣流動(dòng)。同時(shí)通過(guò)在空調(diào)上面裝上攝像頭和一些芯片模組,可以實(shí)現(xiàn)風(fēng)吹向/避開人體的功能。
四、AR在公共安全領(lǐng)域的應(yīng)用
公共安全是一個(gè)大的話題,不光指公安局也包括其他跟安全有關(guān)的行業(yè)。
1. 公共安全領(lǐng)域常見的幾種應(yīng)用
(1)人車識(shí)別
對(duì)人臉和車牌的識(shí)別,進(jìn)行身份核查,基于對(duì)人臉的檢測(cè)識(shí)別、圖像處理、文字識(shí)別等技術(shù)。
采集到信息后,跟信息庫(kù)中預(yù)置的數(shù)據(jù)來(lái)做比對(duì)分析,最終反饋結(jié)果。
(2)指揮調(diào)度
方便指揮中心和前線人員可以實(shí)現(xiàn)一個(gè)基于數(shù)字地圖和實(shí)景相結(jié)合的雙向溝通,掌握現(xiàn)場(chǎng)的情況來(lái)部署作戰(zhàn)方針。
(3)跟無(wú)人機(jī)結(jié)合的應(yīng)用
把無(wú)人機(jī)和AR做結(jié)合,將無(wú)人機(jī)錄制回來(lái)的畫面做一些計(jì)算機(jī)視覺方面的處理,再用在指揮調(diào)度等方面。
2. 應(yīng)用的案例
(1)昆明機(jī)場(chǎng)應(yīng)用
如果大家去昆明長(zhǎng)水機(jī)場(chǎng)就可以留意到,有些巡邏的民警佩戴了很酷的眼鏡,就是AR眼鏡在安全領(lǐng)域內(nèi)的應(yīng)用。
這套系統(tǒng)在公安那邊叫云眼智識(shí),它用來(lái)干什么的呢?
第一,前線的警員佩戴AR眼鏡獲取現(xiàn)場(chǎng)人員和車牌的信息,同時(shí)調(diào)用云南數(shù)千萬(wàn)人的臉庫(kù)防控信息來(lái)指導(dǎo)公安現(xiàn)場(chǎng)做一些措施。
第二,實(shí)時(shí)畫面可以回傳到指揮中心,指揮中心可以就一些突發(fā)事件做實(shí)時(shí)指揮,而不再需要對(duì)講機(jī)。
這個(gè)系統(tǒng)上線后,在去年的四月份到七月份三個(gè)月的時(shí)間里,通過(guò)AR系統(tǒng)幫助公安人員抓到冒用偽造證件200多人。其中有一些是在逃的通緝?nèi)藛T,包括涉毒26個(gè)人、黑惡勢(shì)力7人。
在交通樞紐我們也常??吹揭恍┵u假貨或者拉客的人,這些人的信息其實(shí)都在一個(gè)重點(diǎn)處置庫(kù)里。但并不是每一位民警都認(rèn)識(shí)這些人,那么就可以用AR眼鏡去幫助民警,處置這些賣假貨、拉客、擾亂秩序的人。
(2)廣州天河公安無(wú)人機(jī)指揮調(diào)度系統(tǒng)
當(dāng)無(wú)人機(jī)飛在空中的時(shí)候,它的攝像頭畫面實(shí)時(shí)去做識(shí)別和處理,疊加了一些重要信息。幫助后端的指揮人員立刻知道無(wú)人機(jī)的位置、朝向以及下面的一些需要重點(diǎn)關(guān)注的目標(biāo)物、目標(biāo)建筑。
下圖展示的是無(wú)人機(jī)的應(yīng)用場(chǎng)景,大家可以看到在畫面上有一些拱形的紅褐色的標(biāo)志。這是指揮中心在無(wú)人機(jī)常規(guī)的畫面上繪制路線,指揮現(xiàn)場(chǎng)警員按這條路線去巡邏或者更快接近目標(biāo),現(xiàn)場(chǎng)的警員佩戴AR眼鏡也可以看到無(wú)人機(jī)的畫面以及畫面上的相應(yīng)指引。
大家在圖中能夠看到一些帶箭頭的紅色圓圈,其實(shí)就是警員所在的位置。這樣無(wú)人機(jī)在天上往下看的時(shí)候,指揮中心的領(lǐng)導(dǎo)就可以如何部署警力了。
以往的情況是:領(lǐng)導(dǎo)不在現(xiàn)場(chǎng),他是很難知道每個(gè)人的位置,即使通過(guò)對(duì)講機(jī)告訴溝通,還得去跟地圖做一一對(duì)應(yīng)。
但是有了無(wú)人機(jī)上這樣的自動(dòng)識(shí)別技術(shù)以后,隨身佩戴VR眼鏡或者其他的設(shè)備的警員,它們的位置信息,可以和無(wú)人機(jī)的捕獲畫面很好的結(jié)合在一起,這樣指揮中心就能立刻知道哪里有多少警員,實(shí)現(xiàn)更高效的調(diào)用警力處置突發(fā)事件。
這套系統(tǒng)目前在其他的一些地方也有應(yīng)用,比如消防領(lǐng)域。比如以往撲滅森林山火,即使領(lǐng)導(dǎo)在現(xiàn)場(chǎng)也很難知道哪一個(gè)小隊(duì)的人在哪一個(gè)位置,而且也不容易實(shí)時(shí)的了解到整個(gè)山火的范圍是怎樣的。
通常會(huì)派直升機(jī)或者無(wú)人機(jī)將畫面?zhèn)鬟^(guò)來(lái),大家再去做辨別。而上了這一套無(wú)人機(jī)的系統(tǒng)之后,因?yàn)槊恳粋€(gè)撲救人的位置,都是確定而且看得見的,可以幫助指揮員做更好的調(diào)度,同樣也能夠幫助現(xiàn)場(chǎng)人員避開危險(xiǎn)。
(3)貴陽(yáng)機(jī)場(chǎng)“透明裝卸監(jiān)管系統(tǒng)”
大家坐飛機(jī)的時(shí)候,可能不太留意,我們的行李是怎樣裝上去和卸下來(lái)的呢?我相信大家一定遇到過(guò)行旅箱被野蠻裝卸摔壞了的情況。還會(huì)發(fā)生旅客的行李被偷竊的情況,并不是整個(gè)行李被拎走,而只是從包里偷走了部分物品,這個(gè)投訴率特別高。
為此,貴陽(yáng)機(jī)場(chǎng)安裝了透明裝卸監(jiān)管系統(tǒng),用來(lái)避免這些問(wèn)題。
機(jī)場(chǎng)搬運(yùn)工在工作的時(shí)候,會(huì)用到一個(gè)頭戴式的攝像頭,它會(huì)把搬運(yùn)工的操作全程以第一人稱的視角記錄下來(lái),實(shí)時(shí)的回傳到后端指揮中心。當(dāng)每個(gè)人的操作都被記錄下來(lái)的時(shí)候,自然就沒有人敢亂來(lái)了。
就是這樣很簡(jiǎn)單的一個(gè)小應(yīng)用,卻給當(dāng)?shù)氐臋C(jī)場(chǎng)帶了很大的幫助。除了佩戴攝像頭的搬運(yùn)工,在現(xiàn)場(chǎng)負(fù)責(zé)監(jiān)控裝卸的人員也可以佩戴AR眼鏡,實(shí)時(shí)接收后臺(tái)的指引,減少的暴力作業(yè)、行李丟失的情況。
五、應(yīng)急管理中的AR應(yīng)用
應(yīng)急管理大家平時(shí)可能接觸不多,但實(shí)際上它是保障社會(huì)安全的一個(gè)很重要的部門體系。
應(yīng)急管理一般分作兩個(gè)場(chǎng)景,一個(gè)是平時(shí),另一個(gè)就是戰(zhàn)時(shí)。當(dāng)然這里的戰(zhàn)時(shí)不代表真正的戰(zhàn)爭(zhēng)時(shí)期,而指的是:很多突發(fā)事件的處置對(duì)應(yīng)急管理方來(lái)說(shuō)就是一場(chǎng)戰(zhàn)斗。
1. 平時(shí)防區(qū)的巡查、安全監(jiān)管、安全培訓(xùn)
比如說(shuō)消防,我們?cè)诠径加邢涝O(shè)備,隔一段時(shí)間就會(huì)有消防系統(tǒng)或者應(yīng)急系統(tǒng)的人來(lái)做檢查。
這個(gè)過(guò)程當(dāng)中,如果使用AR眼鏡或者頭戴式的一些設(shè)備,再加上隨身的手機(jī)。就可以幫助巡查人員自動(dòng)的識(shí)別檢查、監(jiān)管的場(chǎng)景。在做安全培訓(xùn)的時(shí)候也可以通過(guò)剛才提到的遠(yuǎn)程協(xié)作系統(tǒng),幫助受訓(xùn)人員去理解操作步驟等。
2. 應(yīng)對(duì)突發(fā)事件
在戰(zhàn)時(shí),也可以把上文提到的指揮調(diào)度系統(tǒng)用在應(yīng)急管理的場(chǎng)景里面去,像消防就是應(yīng)急管理得到一種。
再比如現(xiàn)在的肺炎疫情,這也是應(yīng)急管理里很重要的場(chǎng)景。當(dāng)發(fā)生突發(fā)的重大公共安全衛(wèi)生事件的時(shí)候,社區(qū)、衛(wèi)生系統(tǒng)、公安系統(tǒng)的人全都到各個(gè)地方去,如何知道每一個(gè)終端的工作狀況呢?
我們?cè)谝恍┬侣勈录锌梢钥吹?#xff0c;因?yàn)楣ぷ魅藛T或管理人員的處置不力,導(dǎo)致了很多悲劇。
如果把指揮調(diào)度這樣的AR應(yīng)用給他們裝備上后,整個(gè)過(guò)程就能夠得到取證,在后端的指揮人也能看到每一個(gè)末端發(fā)生的事情來(lái)輔助他們進(jìn)行決策。
應(yīng)急管理,尤其是在疫情發(fā)生的情況下,還有一個(gè)特別AR的應(yīng)用,就是AR眼鏡測(cè)溫。測(cè)溫這件事我相信現(xiàn)在每個(gè)人都很熟悉了,每到一個(gè)出入口就會(huì)有人拿測(cè)溫槍對(duì)你的頭部進(jìn)行測(cè)溫。
但是用測(cè)溫槍是有風(fēng)險(xiǎn)的,因?yàn)闄z測(cè)人員和受測(cè)人員離得太近了,本身有被感染的風(fēng)險(xiǎn)。
如果佩戴裝有紅外模塊的AR眼鏡,離受測(cè)人員三米開外一眼就能看出來(lái)誰(shuí)的額頭溫度是不是超出允許的范圍。
在相對(duì)固定環(huán)境下,經(jīng)過(guò)調(diào)教之后能夠達(dá)到±0.3度的范疇。相對(duì)于近距離測(cè)溫的風(fēng)險(xiǎn)來(lái)說(shuō),誤差度是可以接受的,起碼可以幫助檢測(cè)人員做一個(gè)初步的篩查。
六、AR研發(fā)人員能力模型
如果你想成為一名AR行業(yè)的軟件技術(shù)人員,你需要具備哪些能力呢?
首先要了解AR這個(gè)技術(shù)。它是由哪些部分構(gòu)成的,有哪些層面?最下面的IaaS的平臺(tái),大多數(shù)AR的從業(yè)人員不會(huì)太接觸到,基本上我們也是用運(yùn)營(yíng)商或平臺(tái)廠商的一些基礎(chǔ)設(shè)施。
往上面看是通訊數(shù)據(jù)包括引擎和應(yīng)用,也就是從DaaS到PaaS的層面都是需要各個(gè)方面的軟件技術(shù)人員來(lái)參與的。
1. 算法
在AR里用到的算法,常見的像人臉識(shí)別、肢體的識(shí)別、運(yùn)動(dòng)跟蹤、目標(biāo)的檢測(cè)、語(yǔ)義識(shí)別、交互理解、圖形渲染、空間標(biāo)志等,都是跟算法有關(guān)的。
2. 移動(dòng)端開發(fā)
如果想做AR的移動(dòng)端開發(fā),懂安卓和iOS的開發(fā)基本上就夠了。在這基礎(chǔ)上,因?yàn)锳R是在真實(shí)世界的場(chǎng)景上疊加虛擬內(nèi)容的一項(xiàng)技術(shù),而這個(gè)虛擬內(nèi)容實(shí)現(xiàn)了虛實(shí)結(jié)合的人機(jī)體驗(yàn)。
這樣就會(huì)用到3D模型,業(yè)界最廣泛使用的3D套件是Unity,各個(gè)廠商都有服務(wù)Unity的SDK, SDK整合Unity就可以方便地進(jìn)行3D應(yīng)用的API開發(fā)。
再深入一點(diǎn),還需要對(duì)這個(gè)開發(fā)工具進(jìn)行改進(jìn)。比如,我們用Unreal、GamePlay或者用其他的有源代碼工具的時(shí)候,需要改進(jìn)它的一些渲染能力,或者讓它的渲染引擎變得更加小。
一個(gè)套件的3D渲染部分原來(lái)有幾十兆,如果你有對(duì)源代碼進(jìn)行改造的話,有可能把它縮成幾兆大。對(duì)于移動(dòng)應(yīng)用將會(huì)產(chǎn)生巨大的差距。
3. Web AR
Web AR,就是基于網(wǎng)頁(yè)的AR,微信新的版本里也開始支持了。當(dāng)然,微信沒有提供關(guān)于識(shí)別和渲染這方面的完整SDK,還是需要調(diào)用第三方的AR能力。
具體來(lái)說(shuō)就是AR的云能力,通過(guò)微信小程序里獲取到攝像機(jī)的畫面,再上傳到云端,從云端得到識(shí)別的結(jié)果再疊加相應(yīng)的效果。
如果要從事Web AR,腳本語(yǔ)言肯定是需要掌握的,還有關(guān)于通信、網(wǎng)頁(yè)渲染的一些知識(shí)也是需要的。
總的來(lái)說(shuō),在應(yīng)用端做AR開發(fā)不是一件特別高精尖的技術(shù)。但里頭有很多小的坑,只有在長(zhǎng)期開發(fā)的過(guò)程中才可以發(fā)現(xiàn)。
4. 云平臺(tái)與網(wǎng)絡(luò)通訊
因?yàn)楝F(xiàn)在AR的識(shí)別能力,有的在客戶端做,有的是在云端做,就會(huì)出現(xiàn)云端應(yīng)用開發(fā)能力的問(wèn)題。
如果要想從事這方面的工作,首先要做一些具備企業(yè)級(jí)云端應(yīng)用開發(fā)能力的準(zhǔn)備工作。所謂企業(yè)級(jí)指的不是QQ這樣的面向數(shù)億人在線使用的量級(jí),而是指面向企業(yè)應(yīng)用的企業(yè)級(jí)。
同時(shí)有數(shù)萬(wàn)的訪問(wèn)就已經(jīng)夠用了,其次是企業(yè)級(jí)通訊軟件的開發(fā)能力,這個(gè)要求會(huì)比較高,因?yàn)樗婕暗揭恍┗A(chǔ)的通訊的技術(shù),這里就不展開講了。
七、Q&A
Q:我經(jīng)常要給一些數(shù)據(jù)中心做BCM方案,里面會(huì)有巡查環(huán)節(jié),是否能在巡查和事件初步評(píng)估和緊急應(yīng)急措施的時(shí)候用一些AR技術(shù)?老師有什么建議?
A:這個(gè)就是非常典型的技術(shù)應(yīng)用的場(chǎng)景,在前文所描述的工業(yè)場(chǎng)景里頭,設(shè)備的巡檢是特別重要的一種使用的方法。
第一,可以佩戴AR眼鏡進(jìn)行巡查,眼鏡當(dāng)中出現(xiàn)機(jī)器的運(yùn)行狀況,可以通過(guò)視覺識(shí)別或者通過(guò)物聯(lián)網(wǎng)傳感器的方法來(lái)獲得它的運(yùn)行狀況。在眼鏡的視野里浮出一個(gè)標(biāo)注告訴觀察者,設(shè)備現(xiàn)在的溫度是多少,是不是運(yùn)行有問(wèn)題了等等。
第二,還可以用手機(jī)來(lái)做相關(guān)的應(yīng)用,相對(duì)于AR眼鏡,成本更低,實(shí)用性也很強(qiáng)。
講師簡(jiǎn)介
韓磊,騰訊云最具價(jià)值專家(TVP),廣州亮風(fēng)臺(tái)信息科技有限公司總經(jīng)理 。新媒體和社區(qū)運(yùn)營(yíng)專家,技術(shù)圖書作、譯者。?2001年創(chuàng)辦CoDelphi.com網(wǎng)站。?2003年加入CSDN,歷任網(wǎng)絡(luò)總監(jiān)、副總經(jīng)理、總編輯等職。?2010年加入廣東21世紀(jì)傳媒集團(tuán),歷任信息中心CTO、新媒體事業(yè)部總經(jīng)理、新媒體中心CTO等職。?2017年起擔(dān)任亮風(fēng)臺(tái)廣州公司總經(jīng)理。?擁有美國(guó)Borland公司“Delphi產(chǎn)品專家”稱號(hào)。和劉韌合著有《網(wǎng)絡(luò)媒體教程》,與戴飛合譯有《Beginning C# Objects:對(duì)象到代碼》,譯有《夢(mèng)斷代碼》、《C#編程風(fēng)格》、《代碼整潔之道》等。
點(diǎn)擊文末「閱讀原文」,即可觀看直播精彩回放。
關(guān)注云加社區(qū)公眾號(hào),回復(fù)“TVP直播課”,即可獲取老師演講PPT。
本周直播日歷
互動(dòng)有禮:參與課程直播在線互動(dòng),直播間提問(wèn)就有機(jī)會(huì)獲得騰訊云定制U盤、騰訊云藍(lán)牙音箱和騰訊公仔等精美禮品哦~
添加TcloudM【學(xué)習(xí)君】,提前加入課程交流群
推薦閱讀
聚焦【技術(shù)應(yīng)變力】云加社區(qū)沙龍online重磅上線!
總結(jié)
以上是生活随笔為你收集整理的AR公共安全及应急指挥中的应用 | TVP思享的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: 李宏毅机器学习笔记——回归
- 下一篇: CAD填充比例调整