'3D體感走出遊戲,走進現實,華捷艾米的生意經'

""3D體感走出遊戲,走進現實,華捷艾米的生意經"3D體感走出遊戲,走進現實,華捷艾米的生意經3D體感走出遊戲,走進現實,華捷艾米的生意經

Kinect所採用的3D體感技術並未折戟沉沙,而是換了條賽道,悄然應用在醫療健康、新零售等領域。如華捷艾米等廠商,也在各個領域快速跟進,打開了國內的市場。

作者 | 張瑞

十年前,微軟發佈了一款劃時代的遊戲設備:Kinect。

這款設備顛覆了傳統遊戲的單一操作,不需要使用任何控制器,依靠相機捕捉三維空間中玩家的運動軌跡,就能對遊戲進行精準操控。

遺憾的是,一度被認為引發了人機互動革命的Kinect,幾年後終因遊戲內容生態不足而被砍掉。

而這,也帶來了3D體感技術在世界範圍內的一度沉寂。

幸運的是,Kinect所採用的3D體感技術後期並未折戟沉沙,而是換了條賽道,悄然應用在醫療健康、新零售等領域。

「或許Kinect 作為遊戲控制器的時代已經結束,但現在它又以另一重身份進入到大眾視野中,儘管我們可能完全不知道。」外媒IGN如此說道。

其實,微軟之外,國內很多廠商也意識到了3D體感技術的“高能”,並積極探索。

華捷艾米,就是其中之一。

成立於2014年的華捷艾米,自2010年就開始專注於3D體感交互技術和深度學習的研發,並推出了3D感知芯片、3D感知模組、體感設備等一系列產品和解決方案。

“3D體感交互的本質就是‘人、物、場的數據化’。數據化後,就能理解人的想法,幫助人更好的控制一顰一笑、動作行為,從而與機器進行互動。人和機器交互模式,就會發生一場革命。”華捷艾米董事長李驪對3D體感交互,顯然有著更大的期許。

"3D體感走出遊戲,走進現實,華捷艾米的生意經3D體感走出遊戲,走進現實,華捷艾米的生意經

Kinect所採用的3D體感技術並未折戟沉沙,而是換了條賽道,悄然應用在醫療健康、新零售等領域。如華捷艾米等廠商,也在各個領域快速跟進,打開了國內的市場。

作者 | 張瑞

十年前,微軟發佈了一款劃時代的遊戲設備:Kinect。

這款設備顛覆了傳統遊戲的單一操作,不需要使用任何控制器,依靠相機捕捉三維空間中玩家的運動軌跡,就能對遊戲進行精準操控。

遺憾的是,一度被認為引發了人機互動革命的Kinect,幾年後終因遊戲內容生態不足而被砍掉。

而這,也帶來了3D體感技術在世界範圍內的一度沉寂。

幸運的是,Kinect所採用的3D體感技術後期並未折戟沉沙,而是換了條賽道,悄然應用在醫療健康、新零售等領域。

「或許Kinect 作為遊戲控制器的時代已經結束,但現在它又以另一重身份進入到大眾視野中,儘管我們可能完全不知道。」外媒IGN如此說道。

其實,微軟之外,國內很多廠商也意識到了3D體感技術的“高能”,並積極探索。

華捷艾米,就是其中之一。

成立於2014年的華捷艾米,自2010年就開始專注於3D體感交互技術和深度學習的研發,並推出了3D感知芯片、3D感知模組、體感設備等一系列產品和解決方案。

“3D體感交互的本質就是‘人、物、場的數據化’。數據化後,就能理解人的想法,幫助人更好的控制一顰一笑、動作行為,從而與機器進行互動。人和機器交互模式,就會發生一場革命。”華捷艾米董事長李驪對3D體感交互,顯然有著更大的期許。

3D體感走出遊戲,走進現實,華捷艾米的生意經

3D體感交互正走向更適合的場景

各大公司在3D視覺及體感佈局已久,但一直未出現大規模應用。其中,硬件是制約因素,而算法的複雜性,以及未找到合適的應用場景則是主要原因。

那麼3D視覺及體感技術,適合的應用場景在哪裡?

蘋果開闢了先河的手機3D人臉解鎖及支付領域,首先是兵家必爭之地。

2017年,蘋果率先將3D結構光帶到了手機上,也逐漸引發了3D人臉解鎖及支付的新潮流。如商湯、曠視等廠商都加入到提供軟件解決方案的行列中,而如華捷艾米等廠商則提供軟硬一體的解決方案。

華捷艾米的佈局在於3D Sensing手機前置與後置結構光方案,除攝像頭等重要器件外,也植入了3D結構光、AR尺子、3D建模等關鍵算法。

而在零售上,除了目前已逐漸落地的刷臉支付外,實現人員進出、人物追蹤、取放物體識別等諸多功能的無人貨櫃,也在落地嘗試中。

華捷艾米介紹道,通過顧客拿取物品的手勢,方案能自動識別物品屬性並將其加入購物車,通過多個攝像頭對手勢信息、臉部信息、骨架信息的共同標定,多維度確認,能實現30秒自動刷臉結賬。

“通過刷臉進店後,就能綁定個人信息,實現軌跡跟蹤、行為識別和行為分析。若有偷盜行為,後臺還能直接進行報警。”李驪介紹道。

目前新零售正從單純的監控設備服務向數據服務轉變,不過目前數據服務還不夠成熟。華捷艾米在做的,就是逐漸從全程獲取用戶行為數據,整合零散數據,實現路徑規劃、行為分析等。

而在安防領域,由於目前監控攝像頭多采用的是二維人臉識別,受光線、角度等因素影響較大,並難以進行活體識別。因而,3D體感也逐漸在安防領域打開市場。

3D體感在安防的應用,更多是在人證核驗、智能門鎖等場景。而如監獄等場所,對識別犯人是否有肢體衝突等要求較高,通過三維深度信息更好對其進行判別,也是3D體感落地的方向之一。

華捷艾米在此方面,則和安防廠商合作,發力智能門鎖,並在地鐵、火車站等進行人證核驗等。

在醫療領域,華捷艾米還能通過智能大屏,內置深度攝像頭與體感控制模組,結合自主研發的人臉識別、三維重建等核心技術,讀取30多項人體體脂、體維數據。

除此之外,在軟件之外,華捷艾米研發了硬件設備3D 攝像頭。其自研的3D 攝像頭,基於散斑結構光原理,獲取目標的深度信息,適用於0.28 ~1m的近距離人臉識別、深度數據採集,立體與平面判斷等。

由於對使用距離的要求較高,如新零售的人臉支付、火車站的人證核驗等,相對近距離物體識別場景,是目前3D 攝像頭落地的主要方向。

3D體感技術和芯片間猶如“零和一”

但3D體感在落地過程中,也還存在一系列難點。

3D視覺及體感的產業鏈,可大致分為器件、芯片、模組、系統和方案設計廠商、算法廠商,及產品和應用廠商等環節,目前產業分工上,其實還較為模糊。三維產業的鏈條還需要廠家自己捋順和打通。

華捷艾米在方案的實施中也發現了這一問題。僅靠產品體系其實並不能實現長遠的增長預期,在具體的行業應用場景中,往往涉及到一系列專業算法的運用,尤其現有芯片不能滿足相應需求。

李驪認為,“3D技術的行業應用和芯片間的關係可以用‘零和一’來形容。沒有合適的芯片,整體的應用就很難順暢的進行。”

目前,復現一個MR的場景,至少幾個算法同時運行。而以常用的傳統芯片進行調試,只能放置兩個算法。

另外,3D的視頻帶寬也很大,約為180M,難以上傳。因而,就需要通過芯片在前端對視頻進行解析,數據化之後再進行傳輸,才能更好的實現端雲分析。

再有,人的行為動作反應很快。從想到做一個動作再到實施,整個過程只有8-12毫秒,單純通過軟件的方式很難大幅提高運行效率。

因而,這就需要一個單獨的服務芯片,去集中解決商業問題。

基於以上判斷,華捷艾米從2016年起便自主研發專用MR芯片,目前已研發了三款提供3D測量解決方案的芯片,包括IMI1180、IMI3000芯片及用於提供嵌入式解決方案IMI2280。

其中前兩款芯片主要解決原始數據成像問題,不具備分析功能。IMI2280芯片則搭載了華捷艾米自研的3D骨架算法、3D SLAM、3D手勢識別、3D場景結構化等九大算法,可實現人體識別、物體識別、環境識別,及本地化分析。

“3D體感技術,微軟研究了20多年,蘋果投入200多億美金,研發了七年。對於初創公司而言,這項技術若要重新開始複製,至少需要4-5年。如突破各類算法就要一年半,數據採集就要一年多,芯片開發也要兩年多時間。這其中的技術壁壘就是我們的競爭優勢。”李驪說道。

積十年之功,華捷艾米這樣形容自己的領先優勢。

雙攝像頭後的下個時代是什麼?

3D體感的技術是光學精密儀器與製造、模式識別、圖形圖像、機器學習和神經網絡技術集大成者,跨越多個領域的高精尖技術。

2010年微軟Kinect推出以來,鮮有公司和研究機構完全突破包括3D拍攝、人物提取和骨架識別等的體感交互的所有技術環節。

不過,麥姆斯諮詢認為,3D成像和傳感技術已經在高端市場的“庇護”下逐漸成熟,並逐步取得了成功。

繼雙攝像頭時代的下個時代會是什麼?

如華捷艾米等公司給出的答案,是不斷突破3D體感技術的技術環節,開發出低成本、高準確度、嵌入式的體感交互產品,並在手機支付、新零售、安防等多個場景推動落地。

國產的3D體感技術,正在逐漸打開一個新的市場。

"3D體感走出遊戲,走進現實,華捷艾米的生意經3D體感走出遊戲,走進現實,華捷艾米的生意經

Kinect所採用的3D體感技術並未折戟沉沙,而是換了條賽道,悄然應用在醫療健康、新零售等領域。如華捷艾米等廠商,也在各個領域快速跟進,打開了國內的市場。

作者 | 張瑞

十年前,微軟發佈了一款劃時代的遊戲設備:Kinect。

這款設備顛覆了傳統遊戲的單一操作,不需要使用任何控制器,依靠相機捕捉三維空間中玩家的運動軌跡,就能對遊戲進行精準操控。

遺憾的是,一度被認為引發了人機互動革命的Kinect,幾年後終因遊戲內容生態不足而被砍掉。

而這,也帶來了3D體感技術在世界範圍內的一度沉寂。

幸運的是,Kinect所採用的3D體感技術後期並未折戟沉沙,而是換了條賽道,悄然應用在醫療健康、新零售等領域。

「或許Kinect 作為遊戲控制器的時代已經結束,但現在它又以另一重身份進入到大眾視野中,儘管我們可能完全不知道。」外媒IGN如此說道。

其實,微軟之外,國內很多廠商也意識到了3D體感技術的“高能”,並積極探索。

華捷艾米,就是其中之一。

成立於2014年的華捷艾米,自2010年就開始專注於3D體感交互技術和深度學習的研發,並推出了3D感知芯片、3D感知模組、體感設備等一系列產品和解決方案。

“3D體感交互的本質就是‘人、物、場的數據化’。數據化後,就能理解人的想法,幫助人更好的控制一顰一笑、動作行為,從而與機器進行互動。人和機器交互模式,就會發生一場革命。”華捷艾米董事長李驪對3D體感交互,顯然有著更大的期許。

3D體感走出遊戲,走進現實,華捷艾米的生意經

3D體感交互正走向更適合的場景

各大公司在3D視覺及體感佈局已久,但一直未出現大規模應用。其中,硬件是制約因素,而算法的複雜性,以及未找到合適的應用場景則是主要原因。

那麼3D視覺及體感技術,適合的應用場景在哪裡?

蘋果開闢了先河的手機3D人臉解鎖及支付領域,首先是兵家必爭之地。

2017年,蘋果率先將3D結構光帶到了手機上,也逐漸引發了3D人臉解鎖及支付的新潮流。如商湯、曠視等廠商都加入到提供軟件解決方案的行列中,而如華捷艾米等廠商則提供軟硬一體的解決方案。

華捷艾米的佈局在於3D Sensing手機前置與後置結構光方案,除攝像頭等重要器件外,也植入了3D結構光、AR尺子、3D建模等關鍵算法。

而在零售上,除了目前已逐漸落地的刷臉支付外,實現人員進出、人物追蹤、取放物體識別等諸多功能的無人貨櫃,也在落地嘗試中。

華捷艾米介紹道,通過顧客拿取物品的手勢,方案能自動識別物品屬性並將其加入購物車,通過多個攝像頭對手勢信息、臉部信息、骨架信息的共同標定,多維度確認,能實現30秒自動刷臉結賬。

“通過刷臉進店後,就能綁定個人信息,實現軌跡跟蹤、行為識別和行為分析。若有偷盜行為,後臺還能直接進行報警。”李驪介紹道。

目前新零售正從單純的監控設備服務向數據服務轉變,不過目前數據服務還不夠成熟。華捷艾米在做的,就是逐漸從全程獲取用戶行為數據,整合零散數據,實現路徑規劃、行為分析等。

而在安防領域,由於目前監控攝像頭多采用的是二維人臉識別,受光線、角度等因素影響較大,並難以進行活體識別。因而,3D體感也逐漸在安防領域打開市場。

3D體感在安防的應用,更多是在人證核驗、智能門鎖等場景。而如監獄等場所,對識別犯人是否有肢體衝突等要求較高,通過三維深度信息更好對其進行判別,也是3D體感落地的方向之一。

華捷艾米在此方面,則和安防廠商合作,發力智能門鎖,並在地鐵、火車站等進行人證核驗等。

在醫療領域,華捷艾米還能通過智能大屏,內置深度攝像頭與體感控制模組,結合自主研發的人臉識別、三維重建等核心技術,讀取30多項人體體脂、體維數據。

除此之外,在軟件之外,華捷艾米研發了硬件設備3D 攝像頭。其自研的3D 攝像頭,基於散斑結構光原理,獲取目標的深度信息,適用於0.28 ~1m的近距離人臉識別、深度數據採集,立體與平面判斷等。

由於對使用距離的要求較高,如新零售的人臉支付、火車站的人證核驗等,相對近距離物體識別場景,是目前3D 攝像頭落地的主要方向。

3D體感技術和芯片間猶如“零和一”

但3D體感在落地過程中,也還存在一系列難點。

3D視覺及體感的產業鏈,可大致分為器件、芯片、模組、系統和方案設計廠商、算法廠商,及產品和應用廠商等環節,目前產業分工上,其實還較為模糊。三維產業的鏈條還需要廠家自己捋順和打通。

華捷艾米在方案的實施中也發現了這一問題。僅靠產品體系其實並不能實現長遠的增長預期,在具體的行業應用場景中,往往涉及到一系列專業算法的運用,尤其現有芯片不能滿足相應需求。

李驪認為,“3D技術的行業應用和芯片間的關係可以用‘零和一’來形容。沒有合適的芯片,整體的應用就很難順暢的進行。”

目前,復現一個MR的場景,至少幾個算法同時運行。而以常用的傳統芯片進行調試,只能放置兩個算法。

另外,3D的視頻帶寬也很大,約為180M,難以上傳。因而,就需要通過芯片在前端對視頻進行解析,數據化之後再進行傳輸,才能更好的實現端雲分析。

再有,人的行為動作反應很快。從想到做一個動作再到實施,整個過程只有8-12毫秒,單純通過軟件的方式很難大幅提高運行效率。

因而,這就需要一個單獨的服務芯片,去集中解決商業問題。

基於以上判斷,華捷艾米從2016年起便自主研發專用MR芯片,目前已研發了三款提供3D測量解決方案的芯片,包括IMI1180、IMI3000芯片及用於提供嵌入式解決方案IMI2280。

其中前兩款芯片主要解決原始數據成像問題,不具備分析功能。IMI2280芯片則搭載了華捷艾米自研的3D骨架算法、3D SLAM、3D手勢識別、3D場景結構化等九大算法,可實現人體識別、物體識別、環境識別,及本地化分析。

“3D體感技術,微軟研究了20多年,蘋果投入200多億美金,研發了七年。對於初創公司而言,這項技術若要重新開始複製,至少需要4-5年。如突破各類算法就要一年半,數據採集就要一年多,芯片開發也要兩年多時間。這其中的技術壁壘就是我們的競爭優勢。”李驪說道。

積十年之功,華捷艾米這樣形容自己的領先優勢。

雙攝像頭後的下個時代是什麼?

3D體感的技術是光學精密儀器與製造、模式識別、圖形圖像、機器學習和神經網絡技術集大成者,跨越多個領域的高精尖技術。

2010年微軟Kinect推出以來,鮮有公司和研究機構完全突破包括3D拍攝、人物提取和骨架識別等的體感交互的所有技術環節。

不過,麥姆斯諮詢認為,3D成像和傳感技術已經在高端市場的“庇護”下逐漸成熟,並逐步取得了成功。

繼雙攝像頭時代的下個時代會是什麼?

如華捷艾米等公司給出的答案,是不斷突破3D體感技術的技術環節,開發出低成本、高準確度、嵌入式的體感交互產品,並在手機支付、新零售、安防等多個場景推動落地。

國產的3D體感技術,正在逐漸打開一個新的市場。

3D體感走出遊戲,走進現實,華捷艾米的生意經

重磅預告

全球AI芯片 · 城市智能峰會

10月27日,「全球AI芯片·城市智能峰會」將在深圳大中華喜來登酒店舉辦。這是繼「中國人工智能安防峰會」、「CCF-GAIR視覺智能專場」後,雷鋒網 & AI掘金志安防團隊全力打造的第三大品牌活動。安博會前一天,我們深圳見。

"3D體感走出遊戲,走進現實,華捷艾米的生意經3D體感走出遊戲,走進現實,華捷艾米的生意經

Kinect所採用的3D體感技術並未折戟沉沙,而是換了條賽道,悄然應用在醫療健康、新零售等領域。如華捷艾米等廠商,也在各個領域快速跟進,打開了國內的市場。

作者 | 張瑞

十年前,微軟發佈了一款劃時代的遊戲設備:Kinect。

這款設備顛覆了傳統遊戲的單一操作,不需要使用任何控制器,依靠相機捕捉三維空間中玩家的運動軌跡,就能對遊戲進行精準操控。

遺憾的是,一度被認為引發了人機互動革命的Kinect,幾年後終因遊戲內容生態不足而被砍掉。

而這,也帶來了3D體感技術在世界範圍內的一度沉寂。

幸運的是,Kinect所採用的3D體感技術後期並未折戟沉沙,而是換了條賽道,悄然應用在醫療健康、新零售等領域。

「或許Kinect 作為遊戲控制器的時代已經結束,但現在它又以另一重身份進入到大眾視野中,儘管我們可能完全不知道。」外媒IGN如此說道。

其實,微軟之外,國內很多廠商也意識到了3D體感技術的“高能”,並積極探索。

華捷艾米,就是其中之一。

成立於2014年的華捷艾米,自2010年就開始專注於3D體感交互技術和深度學習的研發,並推出了3D感知芯片、3D感知模組、體感設備等一系列產品和解決方案。

“3D體感交互的本質就是‘人、物、場的數據化’。數據化後,就能理解人的想法,幫助人更好的控制一顰一笑、動作行為,從而與機器進行互動。人和機器交互模式,就會發生一場革命。”華捷艾米董事長李驪對3D體感交互,顯然有著更大的期許。

3D體感走出遊戲,走進現實,華捷艾米的生意經

3D體感交互正走向更適合的場景

各大公司在3D視覺及體感佈局已久,但一直未出現大規模應用。其中,硬件是制約因素,而算法的複雜性,以及未找到合適的應用場景則是主要原因。

那麼3D視覺及體感技術,適合的應用場景在哪裡?

蘋果開闢了先河的手機3D人臉解鎖及支付領域,首先是兵家必爭之地。

2017年,蘋果率先將3D結構光帶到了手機上,也逐漸引發了3D人臉解鎖及支付的新潮流。如商湯、曠視等廠商都加入到提供軟件解決方案的行列中,而如華捷艾米等廠商則提供軟硬一體的解決方案。

華捷艾米的佈局在於3D Sensing手機前置與後置結構光方案,除攝像頭等重要器件外,也植入了3D結構光、AR尺子、3D建模等關鍵算法。

而在零售上,除了目前已逐漸落地的刷臉支付外,實現人員進出、人物追蹤、取放物體識別等諸多功能的無人貨櫃,也在落地嘗試中。

華捷艾米介紹道,通過顧客拿取物品的手勢,方案能自動識別物品屬性並將其加入購物車,通過多個攝像頭對手勢信息、臉部信息、骨架信息的共同標定,多維度確認,能實現30秒自動刷臉結賬。

“通過刷臉進店後,就能綁定個人信息,實現軌跡跟蹤、行為識別和行為分析。若有偷盜行為,後臺還能直接進行報警。”李驪介紹道。

目前新零售正從單純的監控設備服務向數據服務轉變,不過目前數據服務還不夠成熟。華捷艾米在做的,就是逐漸從全程獲取用戶行為數據,整合零散數據,實現路徑規劃、行為分析等。

而在安防領域,由於目前監控攝像頭多采用的是二維人臉識別,受光線、角度等因素影響較大,並難以進行活體識別。因而,3D體感也逐漸在安防領域打開市場。

3D體感在安防的應用,更多是在人證核驗、智能門鎖等場景。而如監獄等場所,對識別犯人是否有肢體衝突等要求較高,通過三維深度信息更好對其進行判別,也是3D體感落地的方向之一。

華捷艾米在此方面,則和安防廠商合作,發力智能門鎖,並在地鐵、火車站等進行人證核驗等。

在醫療領域,華捷艾米還能通過智能大屏,內置深度攝像頭與體感控制模組,結合自主研發的人臉識別、三維重建等核心技術,讀取30多項人體體脂、體維數據。

除此之外,在軟件之外,華捷艾米研發了硬件設備3D 攝像頭。其自研的3D 攝像頭,基於散斑結構光原理,獲取目標的深度信息,適用於0.28 ~1m的近距離人臉識別、深度數據採集,立體與平面判斷等。

由於對使用距離的要求較高,如新零售的人臉支付、火車站的人證核驗等,相對近距離物體識別場景,是目前3D 攝像頭落地的主要方向。

3D體感技術和芯片間猶如“零和一”

但3D體感在落地過程中,也還存在一系列難點。

3D視覺及體感的產業鏈,可大致分為器件、芯片、模組、系統和方案設計廠商、算法廠商,及產品和應用廠商等環節,目前產業分工上,其實還較為模糊。三維產業的鏈條還需要廠家自己捋順和打通。

華捷艾米在方案的實施中也發現了這一問題。僅靠產品體系其實並不能實現長遠的增長預期,在具體的行業應用場景中,往往涉及到一系列專業算法的運用,尤其現有芯片不能滿足相應需求。

李驪認為,“3D技術的行業應用和芯片間的關係可以用‘零和一’來形容。沒有合適的芯片,整體的應用就很難順暢的進行。”

目前,復現一個MR的場景,至少幾個算法同時運行。而以常用的傳統芯片進行調試,只能放置兩個算法。

另外,3D的視頻帶寬也很大,約為180M,難以上傳。因而,就需要通過芯片在前端對視頻進行解析,數據化之後再進行傳輸,才能更好的實現端雲分析。

再有,人的行為動作反應很快。從想到做一個動作再到實施,整個過程只有8-12毫秒,單純通過軟件的方式很難大幅提高運行效率。

因而,這就需要一個單獨的服務芯片,去集中解決商業問題。

基於以上判斷,華捷艾米從2016年起便自主研發專用MR芯片,目前已研發了三款提供3D測量解決方案的芯片,包括IMI1180、IMI3000芯片及用於提供嵌入式解決方案IMI2280。

其中前兩款芯片主要解決原始數據成像問題,不具備分析功能。IMI2280芯片則搭載了華捷艾米自研的3D骨架算法、3D SLAM、3D手勢識別、3D場景結構化等九大算法,可實現人體識別、物體識別、環境識別,及本地化分析。

“3D體感技術,微軟研究了20多年,蘋果投入200多億美金,研發了七年。對於初創公司而言,這項技術若要重新開始複製,至少需要4-5年。如突破各類算法就要一年半,數據採集就要一年多,芯片開發也要兩年多時間。這其中的技術壁壘就是我們的競爭優勢。”李驪說道。

積十年之功,華捷艾米這樣形容自己的領先優勢。

雙攝像頭後的下個時代是什麼?

3D體感的技術是光學精密儀器與製造、模式識別、圖形圖像、機器學習和神經網絡技術集大成者,跨越多個領域的高精尖技術。

2010年微軟Kinect推出以來,鮮有公司和研究機構完全突破包括3D拍攝、人物提取和骨架識別等的體感交互的所有技術環節。

不過,麥姆斯諮詢認為,3D成像和傳感技術已經在高端市場的“庇護”下逐漸成熟,並逐步取得了成功。

繼雙攝像頭時代的下個時代會是什麼?

如華捷艾米等公司給出的答案,是不斷突破3D體感技術的技術環節,開發出低成本、高準確度、嵌入式的體感交互產品,並在手機支付、新零售、安防等多個場景推動落地。

國產的3D體感技術,正在逐漸打開一個新的市場。

3D體感走出遊戲,走進現實,華捷艾米的生意經

重磅預告

全球AI芯片 · 城市智能峰會

10月27日,「全球AI芯片·城市智能峰會」將在深圳大中華喜來登酒店舉辦。這是繼「中國人工智能安防峰會」、「CCF-GAIR視覺智能專場」後,雷鋒網 & AI掘金志安防團隊全力打造的第三大品牌活動。安博會前一天,我們深圳見。

3D體感走出遊戲,走進現實,華捷艾米的生意經"3D體感走出遊戲,走進現實,華捷艾米的生意經3D體感走出遊戲,走進現實,華捷艾米的生意經

Kinect所採用的3D體感技術並未折戟沉沙,而是換了條賽道,悄然應用在醫療健康、新零售等領域。如華捷艾米等廠商,也在各個領域快速跟進,打開了國內的市場。

作者 | 張瑞

十年前,微軟發佈了一款劃時代的遊戲設備:Kinect。

這款設備顛覆了傳統遊戲的單一操作,不需要使用任何控制器,依靠相機捕捉三維空間中玩家的運動軌跡,就能對遊戲進行精準操控。

遺憾的是,一度被認為引發了人機互動革命的Kinect,幾年後終因遊戲內容生態不足而被砍掉。

而這,也帶來了3D體感技術在世界範圍內的一度沉寂。

幸運的是,Kinect所採用的3D體感技術後期並未折戟沉沙,而是換了條賽道,悄然應用在醫療健康、新零售等領域。

「或許Kinect 作為遊戲控制器的時代已經結束,但現在它又以另一重身份進入到大眾視野中,儘管我們可能完全不知道。」外媒IGN如此說道。

其實,微軟之外,國內很多廠商也意識到了3D體感技術的“高能”,並積極探索。

華捷艾米,就是其中之一。

成立於2014年的華捷艾米,自2010年就開始專注於3D體感交互技術和深度學習的研發,並推出了3D感知芯片、3D感知模組、體感設備等一系列產品和解決方案。

“3D體感交互的本質就是‘人、物、場的數據化’。數據化後,就能理解人的想法,幫助人更好的控制一顰一笑、動作行為,從而與機器進行互動。人和機器交互模式,就會發生一場革命。”華捷艾米董事長李驪對3D體感交互,顯然有著更大的期許。

3D體感走出遊戲,走進現實,華捷艾米的生意經

3D體感交互正走向更適合的場景

各大公司在3D視覺及體感佈局已久,但一直未出現大規模應用。其中,硬件是制約因素,而算法的複雜性,以及未找到合適的應用場景則是主要原因。

那麼3D視覺及體感技術,適合的應用場景在哪裡?

蘋果開闢了先河的手機3D人臉解鎖及支付領域,首先是兵家必爭之地。

2017年,蘋果率先將3D結構光帶到了手機上,也逐漸引發了3D人臉解鎖及支付的新潮流。如商湯、曠視等廠商都加入到提供軟件解決方案的行列中,而如華捷艾米等廠商則提供軟硬一體的解決方案。

華捷艾米的佈局在於3D Sensing手機前置與後置結構光方案,除攝像頭等重要器件外,也植入了3D結構光、AR尺子、3D建模等關鍵算法。

而在零售上,除了目前已逐漸落地的刷臉支付外,實現人員進出、人物追蹤、取放物體識別等諸多功能的無人貨櫃,也在落地嘗試中。

華捷艾米介紹道,通過顧客拿取物品的手勢,方案能自動識別物品屬性並將其加入購物車,通過多個攝像頭對手勢信息、臉部信息、骨架信息的共同標定,多維度確認,能實現30秒自動刷臉結賬。

“通過刷臉進店後,就能綁定個人信息,實現軌跡跟蹤、行為識別和行為分析。若有偷盜行為,後臺還能直接進行報警。”李驪介紹道。

目前新零售正從單純的監控設備服務向數據服務轉變,不過目前數據服務還不夠成熟。華捷艾米在做的,就是逐漸從全程獲取用戶行為數據,整合零散數據,實現路徑規劃、行為分析等。

而在安防領域,由於目前監控攝像頭多采用的是二維人臉識別,受光線、角度等因素影響較大,並難以進行活體識別。因而,3D體感也逐漸在安防領域打開市場。

3D體感在安防的應用,更多是在人證核驗、智能門鎖等場景。而如監獄等場所,對識別犯人是否有肢體衝突等要求較高,通過三維深度信息更好對其進行判別,也是3D體感落地的方向之一。

華捷艾米在此方面,則和安防廠商合作,發力智能門鎖,並在地鐵、火車站等進行人證核驗等。

在醫療領域,華捷艾米還能通過智能大屏,內置深度攝像頭與體感控制模組,結合自主研發的人臉識別、三維重建等核心技術,讀取30多項人體體脂、體維數據。

除此之外,在軟件之外,華捷艾米研發了硬件設備3D 攝像頭。其自研的3D 攝像頭,基於散斑結構光原理,獲取目標的深度信息,適用於0.28 ~1m的近距離人臉識別、深度數據採集,立體與平面判斷等。

由於對使用距離的要求較高,如新零售的人臉支付、火車站的人證核驗等,相對近距離物體識別場景,是目前3D 攝像頭落地的主要方向。

3D體感技術和芯片間猶如“零和一”

但3D體感在落地過程中,也還存在一系列難點。

3D視覺及體感的產業鏈,可大致分為器件、芯片、模組、系統和方案設計廠商、算法廠商,及產品和應用廠商等環節,目前產業分工上,其實還較為模糊。三維產業的鏈條還需要廠家自己捋順和打通。

華捷艾米在方案的實施中也發現了這一問題。僅靠產品體系其實並不能實現長遠的增長預期,在具體的行業應用場景中,往往涉及到一系列專業算法的運用,尤其現有芯片不能滿足相應需求。

李驪認為,“3D技術的行業應用和芯片間的關係可以用‘零和一’來形容。沒有合適的芯片,整體的應用就很難順暢的進行。”

目前,復現一個MR的場景,至少幾個算法同時運行。而以常用的傳統芯片進行調試,只能放置兩個算法。

另外,3D的視頻帶寬也很大,約為180M,難以上傳。因而,就需要通過芯片在前端對視頻進行解析,數據化之後再進行傳輸,才能更好的實現端雲分析。

再有,人的行為動作反應很快。從想到做一個動作再到實施,整個過程只有8-12毫秒,單純通過軟件的方式很難大幅提高運行效率。

因而,這就需要一個單獨的服務芯片,去集中解決商業問題。

基於以上判斷,華捷艾米從2016年起便自主研發專用MR芯片,目前已研發了三款提供3D測量解決方案的芯片,包括IMI1180、IMI3000芯片及用於提供嵌入式解決方案IMI2280。

其中前兩款芯片主要解決原始數據成像問題,不具備分析功能。IMI2280芯片則搭載了華捷艾米自研的3D骨架算法、3D SLAM、3D手勢識別、3D場景結構化等九大算法,可實現人體識別、物體識別、環境識別,及本地化分析。

“3D體感技術,微軟研究了20多年,蘋果投入200多億美金,研發了七年。對於初創公司而言,這項技術若要重新開始複製,至少需要4-5年。如突破各類算法就要一年半,數據採集就要一年多,芯片開發也要兩年多時間。這其中的技術壁壘就是我們的競爭優勢。”李驪說道。

積十年之功,華捷艾米這樣形容自己的領先優勢。

雙攝像頭後的下個時代是什麼?

3D體感的技術是光學精密儀器與製造、模式識別、圖形圖像、機器學習和神經網絡技術集大成者,跨越多個領域的高精尖技術。

2010年微軟Kinect推出以來,鮮有公司和研究機構完全突破包括3D拍攝、人物提取和骨架識別等的體感交互的所有技術環節。

不過,麥姆斯諮詢認為,3D成像和傳感技術已經在高端市場的“庇護”下逐漸成熟,並逐步取得了成功。

繼雙攝像頭時代的下個時代會是什麼?

如華捷艾米等公司給出的答案,是不斷突破3D體感技術的技術環節,開發出低成本、高準確度、嵌入式的體感交互產品,並在手機支付、新零售、安防等多個場景推動落地。

國產的3D體感技術,正在逐漸打開一個新的市場。

3D體感走出遊戲,走進現實,華捷艾米的生意經

重磅預告

全球AI芯片 · 城市智能峰會

10月27日,「全球AI芯片·城市智能峰會」將在深圳大中華喜來登酒店舉辦。這是繼「中國人工智能安防峰會」、「CCF-GAIR視覺智能專場」後,雷鋒網 & AI掘金志安防團隊全力打造的第三大品牌活動。安博會前一天,我們深圳見。

3D體感走出遊戲,走進現實,華捷艾米的生意經3D體感走出遊戲,走進現實,華捷艾米的生意經"3D體感走出遊戲,走進現實,華捷艾米的生意經3D體感走出遊戲,走進現實,華捷艾米的生意經

Kinect所採用的3D體感技術並未折戟沉沙,而是換了條賽道,悄然應用在醫療健康、新零售等領域。如華捷艾米等廠商,也在各個領域快速跟進,打開了國內的市場。

作者 | 張瑞

十年前,微軟發佈了一款劃時代的遊戲設備:Kinect。

這款設備顛覆了傳統遊戲的單一操作,不需要使用任何控制器,依靠相機捕捉三維空間中玩家的運動軌跡,就能對遊戲進行精準操控。

遺憾的是,一度被認為引發了人機互動革命的Kinect,幾年後終因遊戲內容生態不足而被砍掉。

而這,也帶來了3D體感技術在世界範圍內的一度沉寂。

幸運的是,Kinect所採用的3D體感技術後期並未折戟沉沙,而是換了條賽道,悄然應用在醫療健康、新零售等領域。

「或許Kinect 作為遊戲控制器的時代已經結束,但現在它又以另一重身份進入到大眾視野中,儘管我們可能完全不知道。」外媒IGN如此說道。

其實,微軟之外,國內很多廠商也意識到了3D體感技術的“高能”,並積極探索。

華捷艾米,就是其中之一。

成立於2014年的華捷艾米,自2010年就開始專注於3D體感交互技術和深度學習的研發,並推出了3D感知芯片、3D感知模組、體感設備等一系列產品和解決方案。

“3D體感交互的本質就是‘人、物、場的數據化’。數據化後,就能理解人的想法,幫助人更好的控制一顰一笑、動作行為,從而與機器進行互動。人和機器交互模式,就會發生一場革命。”華捷艾米董事長李驪對3D體感交互,顯然有著更大的期許。

3D體感走出遊戲,走進現實,華捷艾米的生意經

3D體感交互正走向更適合的場景

各大公司在3D視覺及體感佈局已久,但一直未出現大規模應用。其中,硬件是制約因素,而算法的複雜性,以及未找到合適的應用場景則是主要原因。

那麼3D視覺及體感技術,適合的應用場景在哪裡?

蘋果開闢了先河的手機3D人臉解鎖及支付領域,首先是兵家必爭之地。

2017年,蘋果率先將3D結構光帶到了手機上,也逐漸引發了3D人臉解鎖及支付的新潮流。如商湯、曠視等廠商都加入到提供軟件解決方案的行列中,而如華捷艾米等廠商則提供軟硬一體的解決方案。

華捷艾米的佈局在於3D Sensing手機前置與後置結構光方案,除攝像頭等重要器件外,也植入了3D結構光、AR尺子、3D建模等關鍵算法。

而在零售上,除了目前已逐漸落地的刷臉支付外,實現人員進出、人物追蹤、取放物體識別等諸多功能的無人貨櫃,也在落地嘗試中。

華捷艾米介紹道,通過顧客拿取物品的手勢,方案能自動識別物品屬性並將其加入購物車,通過多個攝像頭對手勢信息、臉部信息、骨架信息的共同標定,多維度確認,能實現30秒自動刷臉結賬。

“通過刷臉進店後,就能綁定個人信息,實現軌跡跟蹤、行為識別和行為分析。若有偷盜行為,後臺還能直接進行報警。”李驪介紹道。

目前新零售正從單純的監控設備服務向數據服務轉變,不過目前數據服務還不夠成熟。華捷艾米在做的,就是逐漸從全程獲取用戶行為數據,整合零散數據,實現路徑規劃、行為分析等。

而在安防領域,由於目前監控攝像頭多采用的是二維人臉識別,受光線、角度等因素影響較大,並難以進行活體識別。因而,3D體感也逐漸在安防領域打開市場。

3D體感在安防的應用,更多是在人證核驗、智能門鎖等場景。而如監獄等場所,對識別犯人是否有肢體衝突等要求較高,通過三維深度信息更好對其進行判別,也是3D體感落地的方向之一。

華捷艾米在此方面,則和安防廠商合作,發力智能門鎖,並在地鐵、火車站等進行人證核驗等。

在醫療領域,華捷艾米還能通過智能大屏,內置深度攝像頭與體感控制模組,結合自主研發的人臉識別、三維重建等核心技術,讀取30多項人體體脂、體維數據。

除此之外,在軟件之外,華捷艾米研發了硬件設備3D 攝像頭。其自研的3D 攝像頭,基於散斑結構光原理,獲取目標的深度信息,適用於0.28 ~1m的近距離人臉識別、深度數據採集,立體與平面判斷等。

由於對使用距離的要求較高,如新零售的人臉支付、火車站的人證核驗等,相對近距離物體識別場景,是目前3D 攝像頭落地的主要方向。

3D體感技術和芯片間猶如“零和一”

但3D體感在落地過程中,也還存在一系列難點。

3D視覺及體感的產業鏈,可大致分為器件、芯片、模組、系統和方案設計廠商、算法廠商,及產品和應用廠商等環節,目前產業分工上,其實還較為模糊。三維產業的鏈條還需要廠家自己捋順和打通。

華捷艾米在方案的實施中也發現了這一問題。僅靠產品體系其實並不能實現長遠的增長預期,在具體的行業應用場景中,往往涉及到一系列專業算法的運用,尤其現有芯片不能滿足相應需求。

李驪認為,“3D技術的行業應用和芯片間的關係可以用‘零和一’來形容。沒有合適的芯片,整體的應用就很難順暢的進行。”

目前,復現一個MR的場景,至少幾個算法同時運行。而以常用的傳統芯片進行調試,只能放置兩個算法。

另外,3D的視頻帶寬也很大,約為180M,難以上傳。因而,就需要通過芯片在前端對視頻進行解析,數據化之後再進行傳輸,才能更好的實現端雲分析。

再有,人的行為動作反應很快。從想到做一個動作再到實施,整個過程只有8-12毫秒,單純通過軟件的方式很難大幅提高運行效率。

因而,這就需要一個單獨的服務芯片,去集中解決商業問題。

基於以上判斷,華捷艾米從2016年起便自主研發專用MR芯片,目前已研發了三款提供3D測量解決方案的芯片,包括IMI1180、IMI3000芯片及用於提供嵌入式解決方案IMI2280。

其中前兩款芯片主要解決原始數據成像問題,不具備分析功能。IMI2280芯片則搭載了華捷艾米自研的3D骨架算法、3D SLAM、3D手勢識別、3D場景結構化等九大算法,可實現人體識別、物體識別、環境識別,及本地化分析。

“3D體感技術,微軟研究了20多年,蘋果投入200多億美金,研發了七年。對於初創公司而言,這項技術若要重新開始複製,至少需要4-5年。如突破各類算法就要一年半,數據採集就要一年多,芯片開發也要兩年多時間。這其中的技術壁壘就是我們的競爭優勢。”李驪說道。

積十年之功,華捷艾米這樣形容自己的領先優勢。

雙攝像頭後的下個時代是什麼?

3D體感的技術是光學精密儀器與製造、模式識別、圖形圖像、機器學習和神經網絡技術集大成者,跨越多個領域的高精尖技術。

2010年微軟Kinect推出以來,鮮有公司和研究機構完全突破包括3D拍攝、人物提取和骨架識別等的體感交互的所有技術環節。

不過,麥姆斯諮詢認為,3D成像和傳感技術已經在高端市場的“庇護”下逐漸成熟,並逐步取得了成功。

繼雙攝像頭時代的下個時代會是什麼?

如華捷艾米等公司給出的答案,是不斷突破3D體感技術的技術環節,開發出低成本、高準確度、嵌入式的體感交互產品,並在手機支付、新零售、安防等多個場景推動落地。

國產的3D體感技術,正在逐漸打開一個新的市場。

3D體感走出遊戲,走進現實,華捷艾米的生意經

重磅預告

全球AI芯片 · 城市智能峰會

10月27日,「全球AI芯片·城市智能峰會」將在深圳大中華喜來登酒店舉辦。這是繼「中國人工智能安防峰會」、「CCF-GAIR視覺智能專場」後,雷鋒網 & AI掘金志安防團隊全力打造的第三大品牌活動。安博會前一天,我們深圳見。

3D體感走出遊戲,走進現實,華捷艾米的生意經3D體感走出遊戲,走進現實,華捷艾米的生意經3D體感走出遊戲,走進現實,華捷艾米的生意經"

相關推薦

推薦中...