若何評價微軟在 MWC 2019 發布的 HoloLens 2?比起一代有哪些晉升?
李瑄,Student @IC Design
如斯優異的情況感知能力,和信息展示能力。壯大的當地計較能力(HPU2),還可毗連云端后臺來加強(2 代選用 Snapdragon 850 SoC 也許是看中了其毗連能力?)。
具體的 Tech Specs 可見官網硬件介紹:
例如感知能力上:其集當作的 Project Kinect 4 的 3D 感知能力其實也不容小覷:
若何評價
我先前往微軟展廳體驗過一代:微軟發布的視頻演示結果和我現實體驗感觸感染一致,顯示結果上并無特效上的夸張,也簡直有 amazing 的醫療教育范疇、工業范疇的合作伙伴 MR 應用。所以 Hololens 2 官方視頻里的結果我也認為是可以相信的。
此次微軟也著重強調了 Hololens 和 Dynamics 365 的集當作給企業協作帶來的賦能:
視頻中可謂是鼓吹了微軟眼中的下一個宿世代的制造業形態(并已有實現落地),這類設備帶來的效率是足以抵消西方與我國的工人勤奮水平帶來的差別的,不由隱約為我國制造業的競爭優勢捏了一把汗。
我小我對 Hololens 這樣設備普及抱有半斤八兩大的等候:
Hololens 也許將來能當作為真正解決 work from home 的交流阻礙的關頭設備?而 work from home 實現了,人類今朝聚居于大城市(以追求工作和交流機遇)的形態都可能會發生轉變了,因為大師不需要地輿位置堆積在一處也可以或許 efficiency。
別的這個平臺的應用要起來需要許很多多的行業開辟者用 AI 為之賦能,這也締造了大量的工作機遇,促進出產力的變化。
從星辰大海的角度,比當晚也很出色的 Mate X 發布會加倍影響深遠。
劉衛華 映維網,映維網創始人~曾任英特爾AR/VR大使,AMD VR參謀
Maigc Leap 被秒殺了
---------------------------------------------------------
這種深度和動作感知手藝最初是在十年前開辟。
今天,微軟正式發布了下一代的可穿戴全息計較機 2,同時為其籌辦了一套全新的夾雜實際辦事,面標的目的貿易的開箱即用 App,以及可以或許進行感知和展望的傳感器。
微軟同時發布了一條目新的 Azure Kinect 設備,為開辟者供給了建立人工智能體驗的新體例。Azure Kinect 將 HoloLens 2 中的深度感應攝像頭手藝與圓形麥克風陣列和彩色攝像頭相連系,并搭配以 Microsoft Azure 中的人工智能辦事。它可以幫忙開辟者成立新的感知功能,如按照鋸子的聲音識別其是否屬于危險的運行環境,撐持機械人在裝箱時判定距離,或者是識別從商鋪貨架中選擇的物品。
所述的新手藝都由微軟的智能辦事供給撐持。無論是在設備自身(可以快速地識別危險環境)運行,仍是說在云端操作(幾乎無限的計較資本),微軟的智能辦事可許可其在最有意義的處所運行計較。簡而言之,這就是智能邊緣和智能云端。
映維網微軟宣傳視頻音頻版騰訊視頻
微軟同時暗示,這些夾雜實際和感知東西將能幫忙企業操縱一種跨越數字宿世界和物理宿世界的全新計較海潮,而只有經由過程智能云和智能邊緣的最新前進才能實現這一方針:從家用電器到倉庫樓層和 HoloLens 2,可以或許供給有關四周情況即時洞察的傳感器和設備正變得越來越多。微軟 Azure 市場營銷的貿易副總裁朱莉婭·懷特暗示:“我們已經走到了‘手藝可以解決實際問題’的境界。你將真正起頭看到全新的計較海潮是什么,以及它將若何轉化為真正的營業當作果。”
1. 從二維屏幕到全息圖
迄今為止,大大都人都履歷過二維屏幕:筆記本電腦,電腦顯示器,智妙手機,平板電腦,以及電視游戲等等。微軟的夾雜實際產物可以從矩形屏幕中提取數字信息,并許可人們在物理空間中與全息圖進行交互。它們可以自力存在,例如醫學生可以抓取人類心臟的三維襯著,調整其巨細并自由扭轉不雅察角度。這種全息圖可以與實際宿世界中的物理對象相聯系關系,例如仿單可以疊加在火爐之上,并標的目的你申明若何改換過濾器。
微軟指出,全新的 HoloLens 2 為一線工人供給了更具沉浸感,加倍直不雅和更為舒適的體驗。對于雙手需要忙于工作的他們而言,HoloLens 2 可以撐持其診斷引擎問題或拜候步調式的組裝申明。用戶可以經由過程頷首或語音返回前一步調進行再次確認。你可以在三維中感知對象,直接在設備看到每一個螺絲應在的位置或每一個棘輪的動彈偏向。
映維網微軟演示全息圖操控騰訊視頻
與初代 HoloLens 比擬,HoloLens 2 供給了一系列的新功能,如抓取和扭轉全息圖的功能。這就像操作真實對象一樣,而非經由過程不天然的手勢。眼動追蹤可以判定用戶在機械的諦視點位置,并調取有效的數字信息。單詞可以在你閱讀時主動滾動。最終的成果就像是從卡通翻頁書到現實片子的沉浸式改變。
新設備的視場是初代 HoloLens 的一倍多(新設備 FOV 對角 52 度),新的顯示手藝令全息圖變得加倍活潑傳神。
微軟云計較和人工智能事業群的 Technical Fellow 艾利克斯·基普曼指出:“這是你第一次體味到觸摸全息圖,與全息圖交互的感受,你幾乎會健忘本身正在看著的是數字內容,而它底子不存在于實際宿世界。”
HoloLens 2 供給的貿易機緣由智能邊緣的擴展功能供給撐持。從嬰兒監督器和冰箱傳感器,再到諸如 HoloLens 這樣復雜的機械, 這涵蓋一系列正在呈爆炸式增加的設備。
這種感知功能更加靈敏的設備可以告訴主動駕駛汽車何時轉彎,要求一件工場設備何時封閉,或者知會工人清理有可能導致客戶滑倒的水坑,甚至是收集旌旗燈號有限的位置。
但跟著邊緣設備正變得越加智能化,它們同時需要變得加倍平安。對于以前需要在云端和當地辦事器上運行的應用程序,它們此刻需要在快速擴展的設備調集中工作,天天針對特心猿意馬的工業流程進行更多的開辟。Azure 現正經由過程 Azure Sphere 和 Azure IoT 等解決方案為邊緣設備供給平安的計較能力,并撐持開辟者設計出可跨越多種計較情況無縫運行的產物。
當這種邊緣設備毗連到智能云端時,它們可以供給更深切的看法并實現真正的協作計較。
基普曼說道:“HoloLens 2 是一條目令人難以置信的多功能邊緣設備。它可以脫機工作,而且可以毗連到任何云端。但它的設計同時考慮了 Azure。當與 Azure 毗連時,它將當作為任何人都可以從任何設備或任何平臺拜候的共享體驗。當兩者連系在一路時,那就是古跡發生的時刻。”
2. 始于 Xbox 和數十年的研發
微軟數十年來的研究項目和貿易開辟塑造了他們在夾雜實際和感知項目標前進:最初為 Xbox 開辟的手勢識別設備,針對 AI 的投資,初代 HoloLens 的經驗教訓,有求必應的應用程序,平安和身份辦理方面的專業常識,以及與客戶合作和開辟企業解決方案的悠長汗青。
可是,為了實現夾雜實際承諾的真正協作式和沉浸式計較體驗,這種東西同時需要在開放情況和人們已經擁有的設備或口袋中運行。
基普曼認為:“夾雜實際的承諾是,所有這些設備都是窺見存在于宿世界中的聯網內容的透鏡。假如我想把全息圖放在房間里面。當我分開房間,而你戴著 HoloLens 或拿著智妙手機或平板電腦進來,你應該看到全息圖嗎?假設隱私和權限都合用,謎底是必定的。”
今天微軟發布了一項名為 Azure Spatial Anchors 的云端辦事,其許可用戶建立在特心猿意馬物理空間中持久存在的全息圖。例如,當服裝店司理將服裝的全息圖像“放在”相鄰的假人模特身邊,其他人將可以經由過程 HoloLens,智妙手機或平板電腦進行瀏覽。第二天,一名員工可以走進來并用 iPhone 指標的目的每個假人模特,看看它的裝扮結果并起頭籌辦響應的服飾。”
3. 面標的目的一線工人的手藝
對于經由過程計較機完當作大部門工作的信息工作者而言,他們都受益于科技的爆炸性增加,因為這使得他們可以或許經由過程鼠標觸碰幾乎任何一切并實現即時的溝通。這為小我和企業帶來了前所未有的出產力晉升。
但大大都人并不是如斯。在這場手藝革射中,人們經常是用雙手來組裝機械,賜顧幫襯病人,補綴設備,解除故障或與事物互動。Dynamics 365 Mixed Reality at Work 的總司理洛林·巴丁(Lorraine Bardeen)暗示,這條目應用程序為一線工人供給了實現近似出產力晉升的龐大機緣。
巴丁指出:“一線員工不僅對一系列企業的日常運營至關主要,并且對其制造產物的體例同樣至關主要。并且他們往往屬于員工中的大大都。但與那些在辦公室或在更傳統的計較友愛型情況中工作的人比擬,他們很少能體味到手藝前進帶來的晉升。”
當微軟起頭標的目的企業扣問夾雜實際若何可以或許致使他們受益時,同樣的需求呈現在了各個行業之中。他們但愿位于偏遠地域或分歧工作地址的工作人員可以或許與專家對接并協同解決問題,在三維空間中可視化設備或家具以判定其是否合適,以及培訓需要雙手自由工作的新員工。
映維網騰訊視頻
為了供給更多開箱即用的價值,微軟為 Microsoft Dynamics 365 建立了夾雜實際版應用程序。此刻企業可以當即經由過程 HoloLens 2 來知足工作場合的需求,無需再雇傭一多量開辟者。
繼 Dynamics 365 Remote Assist 和 Dynamics 365 Layout 之后,Dynamics 365 Guides 當作為了微軟開路貿易夾雜實際應用程序的又一摸索。Guides 許可企業將紙張和屏幕的培訓材料釀成一種身臨其境的三維體驗。
“所有人都但愿當作功,而幫忙新員工敏捷上手工作的能力十分貴重。”PACCAR ITD 全球手藝與運營的高級總監羅伯·布蘭森(Rob Branson)如是說道,他的公司已經試用了 Dynamics 365 Guides 的早期版本。
他指出:“若是你想想當作年人進修的體例,你會發現視覺的占比很是高。可以或許看到步調式的指南疊加在物理對象上可以加速員工進修一項新使命的速度。”
HoloLens 2 顯然考慮到一線工人。與初代 HoloLens 比擬,它更輕更舒適,重心更為均衡,這樣用戶就能成天佩帶。全新的翻蓋式眼罩可許可工人輕松切換物理宿世界和全息宿世界。
PACCAR 員工佩帶的設備就像帽子一樣可以或許輕松滑動,他們可以拜候步調式的全息指令,并在其幫忙下完當作組裝卡車門等不熟悉的使命。在 Dynamics 365 Guides 中,點亮的箭頭可以清楚申明從每一個步調,如線纜需要經由過程的孔洞或所需東西的準確位置。
疊加在卡車門的全息圖申明了員工應若何執行所述使命,全息圖同時點亮了鋼板之下的布局,而若是沒有 X 射線等手藝的撐持,常人凡是無法看到鋼板底下的布局。
對于勞動力老齡化的行業,企業火急需要敏捷把相關的工作聰明傳給下一代工人。在以往,這凡是需要數年的學徒時候或數十年的工作經驗才能堆集實現。
例如,對于新插手阿拉斯加航空公司的機械師,他們原本需要大約兩年的時候才能完當作所有的培訓。夾雜實際東西可以顯著削減新人的進修曲線,而沉浸式培訓情況同時可以或許令陪伴著電子游戲當作長的新生代員工發生共識。
阿拉斯加航空公司計謀總監麥克·羅倫戈(Mike Loreng)暗示:“紙張變得繪聲繪色。我看到的不再是一張二維紙張,而是投影至引擎的 3D 內容。”
4. 人與物之間的智能對話
當操縱智能邊緣和智能遠端的分歧功能時,夾雜實際可以變得加倍壯大。
在一些情景中,你但愿可以或許在智能邊緣快速處置信息,而不是將數據發送到云端,例如可以提醒你即將發生平安風險的攝像頭或節制制動系統的算法。在工場車間,并非每個傳感器的所稀有據都與“此時此刻”相關。是以,在邊緣運行不太復雜的 AI 辦事可以幫忙過濾失落不相關的信息或執行不需要云端撐持的使命。
若是你需要全息圖來幫忙潛在客戶設想新車的樣式,單臺 HoloLens 2 即可經由過程板載功能供給充沛的計較能力和分辯率。
但若是將設備毗連至全新的 Azure Remote Rendering 夾雜實際云端辦事,你將可以快速生當作復雜的三維數字模子,而原本企業可能需要破費數天或數月的時候才能構建出與之媲美的模子細節。若是沒有云端的圖形處置能力,這是不成能實現的使命。
懷特指出:“俄然之間,夾雜實際從一種別致玩意釀成了可以或許加強你工作的真正用例,并可以完全代替一整個貿易流程。例如,以此中以往無法實現的體例來利用完整的數字建筑。”
經由過程賦能現場工作人員快速診斷和修復對運營至關主要的機械,PTC 的物聯網和夾雜實際東西可以幫忙企業最小化停機時候。
映維網騰訊視頻
對于微軟合作伙伴之一 PTC 新開辟的系統,其已經集當作了物聯網邊緣解決方案,Azure 云和夾雜實際東西,從而對從航空航天到國防承包等一系列企業進行了數字化轉型。
PTC 首席執行官吉姆·海佩爾曼(Jim Heppelmann)指出,你可以設想一下這樣的情景:在第二天來到嘗試室后,研究人員俄然發現處置血液樣品的關頭機械已經停機。接下來會發生什么工作呢?
在幾年前,閃灼的燈光或恍惚的錯誤信息可能是獨一的線索。她可能會打德律風給制造商,他可能會經由過程德律風體例來診斷問題。最有可能的是,嘗試室不得不為把在那座城市工作,甚至是在另一座城市工作的維修人員派往現場。從頭運行機械可能需要數小時或數天的時候。與此同時,擔憂血液成果的患者只能無奈地苦等。
今天,借助 ThingWorx for Azure 辦事,她可以戴上 HoloLens 2 設備并查看全息儀表板,此中每個組件的運行狀況和狀況城市映射到物理機械。由微型物聯網傳感器采集并發送到 Azure 云的數據可能會診斷此中一個問題。然后,這位研究人員可以拜候步調式的全息申明,慢慢打開蓋子,翻轉杠桿,插入新零件。若是她依然無法診斷問題或解決問題,坐在內布拉斯加州辦公室的維修專家可以經由過程 HoloLens 2 看到其面前的一切,并經由過程語音和全息指示指導她完當作操作。
海佩爾曼說道:“這是人與物之間的封鎖輪回。物聯網設備告訴我錯誤地點,夾雜實際解決方案則將我與可以或許輕松解決問題的專家對接,從而節流破費在通勤路上的時候與金錢。”
他進一步指出,對于可能需要長時候佩帶夾雜實際頭顯的一線工人來說,HoloLens 2 晉升的舒適度與視場具有十分主要的意義。
他暗示:“這兩點令 HoloLens 從有趣的原型釀成了能真正普遍用于工場,病院和建筑工地的適用性東西。這是一猛進步。”
這些功能對微軟的另一個合作伙伴 Bentley Systems 而言同樣主要,他們本家兒如果為正在睜開復雜的大型根本舉措措施項目標工程師,建筑師和建筑公司開辟軟件。
負責項目交付的高級副總裁諾亞·艾克豪斯(Noah Eckhouse)暗示,當站在存在大量勾當組件的平臺和需要操作重型設備來檢修城市火車站或足球場時,俯視手機或平板電腦上的信息可能很是危險。HoloLens 頭顯則許可工作人員在感知物理情況的同時天然獲取數字信息。
映維網騰訊視頻
經由過程 HoloLens,這家公司的 SYNCHRO 軟件許可工人放大施工現場的特定位置,并拜候相關的主要數字信息,如平安指南或安裝申明。辦理人員可以從三維視圖預覽兩天后或三周后的結果,并基于不竭轉變的實際來展望潛在的打算沖突。
他暗示:“建筑工地就像是一場大型的芭蕾舞表演,一切都需要很是精心的編排,而材料和人的活動都必需存在于必然的空間內。打算表從你起頭的第一天就要改變。”
盡管可以在單臺設備存儲和更新兩居室平房的打算,但若是沒有云計較,你將無法跟蹤大型根本舉措措施項目中的所有勾當組件。
經由過程將功課現場上的每臺 HoloLens 設備毗連至在 Azure 中不竭更新的本家兒模子,SYNCRHO 可以或許確保每小我都是利用不異的共享實際,并經由過程最新信息來排序功課,打算起重機移動,跟蹤進度,并確保工人平安。
艾克豪斯認為:“云端毗連至關主要,因為對于這些大型項目,現場與工程師和設計師之間的往返信息傳遞是在不竭地進行。在物理宿世界中開展根本舉措措施項目標任何影響可都是來真的。”
5. 將壯大的感知東西帶到邊緣
計較機視覺和人工智能的兩項決議性當作就給 HoloLens 2 的沉浸式體驗做出了進獻。經由過程語義理解來詮釋物理空間的能力許可設備區分墻壁和窗戶,或區分沙發和咖啡桌。天然手部追蹤則許可人們更直不雅地扭轉和擴展全息圖,而不是必需進修仿照鼠標移動的手勢。
這些前進得益于第四代的 Kinect,并連系了在邊緣運行的 AI 東西。這種深度和動作感知手藝最初是在十年前開辟,并旨在為 Xbox 建立手勢識別附件。但對于可以精確感知深度并確定人體在空間中移動的能力,其潛力遠遠不局限于游戲。
例如,Ocuvera 正與 Azure Kinect 合作開辟這樣一種系統:旨在幫忙防止每年在美國病院發生的大約 100 萬次顛仆,甚至是全球規模內的更多顛仆。他們研發的系統可以感知需要幫忙行走的患者是于何時無助地下床,并提前預警護士以供給幫忙。
操縱深度感應攝像頭和人工智能算法,系統可以在患者起床前識別出活動模式,如坐起或擺動腿部的動作。11 個臨床試點的初步研究成果發現,在實施上述手藝后,無輔助和未寄望的下床行走削減了 90%以上。
首席執行官史蒂夫·凱恩(Steve Kiene)暗示,Ocuvera 團隊調查了宿世界每一臺深度感應攝像頭,甚至試圖開辟自家的深度感應攝像頭。但對于區分病人是標的目的前移動抑或只是翻身,沒有任何一條目設備可以或許接近于 Azure Kinect 的精確性和分辯率。
他說道:“這就像玩撲克時的認牌一樣。只有 Azure Kinect 可以或許為我們供給可以真正領會患者在病床上發生的環境,并以足夠的精確度展望其意圖的數據。當我們在病院進行試點測試時,他們經常告訴我們這是不成能的做到的工作,但隨后他們發現它確實有用,并且他們感應很是驚奇。”
凱恩認為,新的 Azure Kinect 的價值在于它將傳感器硬件與 Cognitive Services 等 Azure 東西連系在了一路,使得開辟者可以或許輕松快速地擺設 AI 解決方案。這可以幫忙 Ocuvera 團隊更輕松地將語音識別或說話翻譯等辦事集當作至系統之中。例如,撐持患者以多種說話呼叫護士。
跟著越來越多的辦事移到邊緣,它們無需將數據發送至云端即可在當地運行。
凱恩指出:“Azure Kinect 不僅僅是一個攝像頭,它與所有其他很是主要的辦事相連,如語音識別和身體追蹤。這一整個辦事包很是有價值。”
為了幫忙 HoloLens 2 當作為宿世界上最具沉浸感的全息計較機和最為智能的邊緣設備,基普曼已經投入了十多年的時候與精神。他暗示,任何發現家的真正回報都是基于人們可以在其立異根本上做什么。
基普曼詮釋說:“我們把全副身心和所有醒著的時候都用于創作發明這個愿景,并將其付諸實踐。此刻,我們終于可以看到這項手藝將若何幫忙我們的客戶進行市場競爭,進行數字化轉型,實現以前無法實現的方針,做一些我們從未想象過的工作,令我無比興奮的工作。
映維網微軟演示騰訊視頻
HoloLens 2 MWC 現場演示(來歷)
0 篇文章
如果覺得我的文章對您有用,請隨意打賞。你的支持將鼓勵我繼續創作!