本問題已被收錄至新聞專題華為先發制人,這屆 MWC 到底有多少黑科技?歡迎關注專題,了解更多關於 MWC 及國內外科技數碼廠商最新發布的產品、技術 &>&>&>

HoloLens 2,終於在微軟的 MWC2019 記者會上正式登場了。相對於第一代 HoloLens 更多只是個概念機種,HoloLens 2 收集了各方的意見,並在可視角、體積、重量等各方面進行了改進,讓它更像一個真正可以上市的產品。HoloLens 2 預定今年稍晚上市,定價為 US$3,500,或是你也可以配合一套名為 Dynamics 365 Remote Assist 的軟體一同用訂閱的,月費 US$125。頭戴設備初步將在美、日、中、加、英、法、澳、愛爾蘭、紐西蘭等市場推出,

官網介紹:

Microsoft HoloLens | Mixed Reality Technology for Business?

www.microsoft.com圖標

直播地址 Microsoft at MWC19 Barcelona


如此優秀的環境感知能力,和信息展示能力。強大的本地計算能力(HPU2),還可連接雲端後台來增強(2代選用 Snapdragon 850 SoC也許是看中了其連接能力?)。

詳細的 Tech Specs可見官網硬體介紹:

HoloLens 2—Overview, Features, and Specs | Microsoft HoloLens?

www.microsoft.com圖標Introducing MSFT HoloLens 2

例如感知能力上:其集成的 Project Kinect 4的 3D感知能力其實也不容小覷:

如何評價 Azure Kinect??

www.zhihu.com圖標

我先前去微軟展廳體驗過一代:微軟發布的視頻演示效果和我實際體驗感受一致,顯示效果上並無特效上的誇張,也的確有 amazing的醫療教育領域、工業領域的合作夥伴 MR應用。所以 Hololens 2 官方視頻里的效果我也認為是可以信賴的。

這次微軟也著重強調了 Hololens和 Dynamics 365的集成給企業協作帶來的賦能:

Remote Assist | Microsoft Dynamics 365?

dynamics.microsoft.com圖標Dynamics 365 for Hololens 2

視頻中可謂是宣揚了微軟眼中的下一個世代的製造業形態(並已有實現落地),這類設備帶來的效率是足以抵消西方與我國的工人勤勞程度帶來的差異的,不由隱隱為我國製造業的競爭優勢捏了一把汗。

我個人對 Hololens這樣設備普及抱有相當大的期待:

Hololens 也許未來能成為真正解決 work from home的交流阻礙的關鍵設備?而 work from home實現了,人類目前聚居於大城市(以尋求工作和交流機會)的形態都可能會發生變化了,因為大家不需要地理位置聚集在一處也能夠 efficiency。

另外這個平台的應用要起來需要許許多多的行業開發者用 AI為之賦能,這也創造了大量的工作機會,促進生產力的變革。

從星辰大海的角度,比當晚也很精彩的 Mate X發布會更加影響深遠。


更新, 另一個關於Hololens的問題下的回答

Hololens 2 和 Magic Leap 相比你更看好誰?哪個能更早面向普通消費者??

www.zhihu.com圖標

----------

基於「個人計算設備一定向著越來越本能、越來越模擬發展」的觀念,個人始終堅信以Hololens為代表的AR/MR設備會是未來的主流個人計算形態。

Hololens 2本體的幾個亮點:

  1. FOV * 2;
  2. 眼球追蹤;
  3. 完全的手指跟蹤;

第一點就不用多說了,最關鍵的指標之一。外媒已有評測,Hololens 2的FOV大約從30°增加到了52°,參考以下視頻,坐標1:34

https://www.youtube.com/watch?v=KkBLx2OsJg8?

www.youtube.com

不過這個數據似乎還算不上double,不能保證正確性。

不管怎麼說,FOV增加總是好的,希望早日達到70°

眼球追蹤也是一個重頭戲,Hololens 2 利用了一個小攝像頭實現了這個功能。

眼球追蹤相當於提供了另一種的輸入/控制方式。在發布會上,presenter演示了使用「眼球激活評論區文本框,語音輸入文本,然後發送評論」。不難想像,未來的HoloLens app完全可以使用眼球追蹤用戶當前關心的內容,然後實時、自動、智能顯示相關信息,甚至不一定需要用戶使用手勢或者語音控制。

第三點,從發布會現場演示來看,Hololens 2對手指的跟蹤和對動作的響應比起一代要迅速、自然得多,支持的手勢已經遠遠不止一代的bloom和click兩種了,基本上實現了Alex承諾的instinctual control。

功能方面,Hololens 2支持遠程虛擬會議,以及跨平台協作。科幻片裡面的遠程會議的場景已經基本成為現實了(雖然好像沒法顯示下半身233)。

遺憾的是,Hololens 2還是明確面向industries的產品,發售價為3500刀,比一代商業版便宜1500刀,但是又比開發者版貴了500刀,很難說是漲價了還是降價了。唯一可以確定的是,至少這一代還是沒有消費者什麼事了。

不過,個人很難想像微軟會抱著硬體不放。等到MR技術真正成熟了,微軟肯定還是希望主要的MR設備都由第三方設計製造,自己提供軟體、平台、技術,一如wintel時代。當然,跟90年代的微軟不同的是,現在的微軟在硬體製造方面也已經非常有經驗了,所以未來很有可能如同現在的安卓生態,就是說微軟出自己的標杆硬體產品,其他廠商百花齊放,用戶各取所需。

想起來了,還有驍龍850的soc,貌似忘記講了?可能對微軟來說底層無所謂用什麼吧。不過續航方面應該會更好一些,等一波後續評測。

個人評價:

  1. 本次微軟在MWC上的發布會,其實還是挺特立獨行的。可能只有微軟一家,會花費絕大部分時間談自家的產品如何和各種醫療、設計、工程行業結合的了。與其說是來參加MWC,不如說微軟只是借了巴塞羅那的場地辦了一場小型的Build 2019,壓根沒有和其他參展商同台競技的意思;
  2. 功能層面的更新主要集中在多人協作上面。也就是「如何營造一個可共享的虛擬辦公環境」,這對於MR/AR無疑是非常重要的;
  3. 高昂的售價顯然是阻礙Hololens普及的重要原因。然而,Hololens 2 依舊定位industries。而代替Hololens 2、首先下沉到消費者領域的,是它的軟體開發環境。比如發布會上特意選擇了Ipad與HoloLens協作(而不是自家的surface,個人認為,這是在強調開放的姿態),也就是說,即使開發者沒有Hololens,依然可以用現有的商用設備熟悉相關的技術,為日後的MR計算做好準備;
  4. 最後,微軟並沒有忘記MR的消費應用前景,邀請了Epic Games的人來站台(好吧最近epic的名聲不是很好...),表示MR肯定會持續用於遊戲領域。只可惜沒什麼乾貨
  5. 微軟現在一直把自己定位成所謂「賦能型企業」,只不過,Hololens 2目前還基本停留在empowering business的階段,距離empowering humans還有段時間,希望微軟不要讓我們等太久。


Maigc Leap 被秒殺了

  1. 售價3500美元,中國首發,微軟HoloLens 2正式發布 - 映維網
  2. 十年一劍!微軟HoloLens 2是如何沸騰下一代計算平台 - 映維網

---------------------------------------------------------

這種深度和動作感知技術最初是在十年前開發

今天,微軟正式發布了下一代的可穿戴全息計算機HoloLens 2,同時為其準備了一套全新的混合現實服務,面向商業的開箱即用App,以及能夠進行感知和預測的感測器。

微軟同時發布了一款新的Azure Kinect設備,為開發者提供了創建人工智慧體驗的新方式。Azure Kinect將HoloLens 2中的深度感應攝像頭技術與圓形麥克風陣列和彩色攝像頭相結合,並搭配以Microsoft Azure中的人工智慧服務。它可以幫助開發者建立新的感知功能,如根據鋸子的聲音識別其是否屬於危險的運行情況,支持機器人在裝箱時判斷距離,或者是識別從商店貨架中選擇的物品。

所述的新技術都由微軟的智能服務提供支持。無論是在設備自身(可以快速地識別危險情況)運行,還是說在雲端操作(幾乎無限的計算資源),微軟的智能服務可允許其在最有意義的地方運行計算。簡而言之,這就是智能邊緣和智能雲端。

〔映維網〕微軟HoloLens 2宣傳視頻-音頻版_騰訊視頻?

v.qq.com圖標

微軟同時表示,這些混合現實和感知工具將能幫助企業利用一種跨越數字世界和物理世界的全新計算浪潮,而只有通過智能雲和智能邊緣的最新進步才能實現這一目標:從家用電器到倉庫樓層和HoloLens 2,能夠提供有關周圍環境即時洞察的感測器和設備正變得越來越多。微軟Azure市場營銷的商業副總裁朱莉婭·懷特表示:「我們已經走到了『技術可以解決現實問題』的地步。你將真正開始看到全新的計算浪潮是什麼,以及它將如何轉化為真正的業務成果。」

1. 從二維屏幕到全息圖

迄今為止,大多數人都經歷過二維屏幕:筆記本電腦,電腦顯示器,智能手機,平板電腦,以及電視遊戲等等。微軟的混合現實產品可以從矩形屏幕中提取數字信息,並允許人們在物理空間中與全息圖進行交互。它們可以獨立存在,例如醫學生可以抓取人類心臟的三維渲染,調整其大小並自由旋轉觀察角度。這種全息圖可以與現實世界中的物理對象相關聯,例如說明書可以疊加在火爐之上,並向你說明如何更換過濾器。

微軟指出,全新的HoloLens 2為一線工人提供了更具沉浸感,更加直觀和更為舒適的體驗。對於雙手需要忙於工作的他們而言,HoloLens 2可以支持其診斷引擎問題或訪問步驟式的組裝說明。用戶可以通過點頭或語音返回前一步驟進行再次確認。你可以在三維中感知對象,直接在設備看到每一個螺絲應在的位置或每一個棘輪的轉動方向。

〔映維網〕微軟HoloLens 2演示——全息圖操控_騰訊視頻?

v.qq.com圖標

與初代HoloLens相比,HoloLens 2提供了一系列的新功能,如抓取和旋轉全息圖的功能。這就像操作真實對象一樣,而非通過不自然的手勢。眼動追蹤可以判斷用戶在機器的注視點位置,並調取有用的數字信息。單詞可以在你閱讀時自動滾動。最終的結果就像是從卡通翻頁書到實際電影的沉浸式轉變。

新設備的視場是初代HoloLens的一倍多(新設備FOV對角52度),新的顯示技術令全息圖變得更加生動逼真。

微軟雲計算和人工智慧事業群的Technical Fellow艾利克斯·基普曼指出:「這是你第一次體會到觸摸全息圖,與全息圖交互的感覺,你幾乎會忘記自己正在看著的是數字內容,而它根本不存在於現實世界。」

HoloLens 2提供的商業機遇由智能邊緣的擴展功能提供支持。從嬰兒監視器和冰箱感測器,再到諸如HoloLens這樣複雜的機器, 這涵蓋一系列正在呈爆炸式增長的設備。

這種感知功能越發敏銳的設備可以告訴自動駕駛汽車何時轉彎,要求一件工廠設備何時關閉,或者知會工人清理有可能導致客戶滑倒的水坑,甚至是網路信號有限的位置。

但隨著邊緣設備正變得越加智能化,它們同時需要變得更加安全。對於以前需要在雲端和本地伺服器上運行的應用程序,它們現在需要在快速擴展的設備集合中工作,每天針對特定的工業流程進行更多的開發。Azure現正通過Azure Sphere和Azure IoT等解決方案為邊緣設備提供安全的計算能力,並支持開發者設計出可跨越多種計算環境無縫運行的產品。

當這種邊緣設備連接到智能雲端時,它們可以提供更深入的見解並實現真正的協作計算。

基普曼說道:「HoloLens 2是一款令人難以置信的多功能邊緣設備。它可以離線工作,並且可以連接到任何雲端。但它的設計同時考慮了Azure。當與Azure連接時,它將成為任何人都可以從任何設備或任何平台訪問的共享體驗。當兩者結合在一起時,那就是奇蹟發生的時刻。」

2. 始於Xbox和數十年的研發

微軟數十年來的研究項目和商業開發塑造了他們在混合現實和感知項目的進步:最初為Xbox開發的手勢識別設備,針對AI的投資,初代HoloLens的經驗教訓,有求必應的應用程序,安全和身份管理方面的專業知識,以及與客戶合作和開發企業解決方案的悠久歷史。

但是,為了實現混合現實承諾的真正協作式和沉浸式計算體驗,這種工具同時需要在開放環境和人們已經擁有的設備或口袋中運行。

基普曼認為:「混合現實的承諾是,所有這些設備都是窺見存在於世界中的聯網內容的透鏡。假如我想把全息圖放在房間裡面。當我離開房間,而你戴著HoloLens或拿著智能手機或平板電腦進來,你應該看到全息圖嗎?假設隱私和許可權都適用,答案是肯定的。」

今天微軟發布了一項名為Azure Spatial Anchors的雲端服務,其允許用戶創建在特定物理空間中持久存在的全息圖。例如,當服裝店經理將服裝的全息圖像「放在」相鄰的假人模特身邊,其他人將可以通過HoloLens,智能手機或平板電腦進行瀏覽。第二天,一名員工可以走進來並用iPhone指向每個假人模特,看看它的裝扮效果並開始準備相應的服飾。」

3. 面向一線工人的技術

對於通過計算機完成大部分工作的信息工作者而言,他們都受益於科技的爆炸性增長,因為這使得他們能夠通過滑鼠觸碰幾乎任何一切並實現即時的溝通。這為個人和企業帶來了前所未有的生產力提升。

但大多數人並不是如此。在這場技術革命中,人們經常是用雙手來組裝機器,照顧病人,修理設備,排除故障或與事物互動。Dynamics 365 Mixed Reality at Work的總經理洛林·巴丁(Lorraine Bardeen)表示,這款應用程序為一線工人提供了實現類似生產力提升的巨大機遇。

巴丁指出:「一線員工不僅對一系列企業的日常運營至關重要,而且對其製造產品的方式同樣至關重要。而且他們往往屬於員工中的大多數。但與那些在辦公室或在更傳統的計算友好型環境中工作的人相比,他們很少能體會到技術進步帶來的提升。」

當微軟開始向企業詢問混合現實如何能夠致使他們受益時,同樣的需求出現在了各個行業之中。他們希望位於偏遠地區或不同工作地點的工作人員能夠與專家對接並協同解決問題,在三維空間中可視化設備或傢具以判斷其是否合適,以及培訓需要雙手自由工作的新員工。

〔映維網〕Dynamics 365 Guides_騰訊視頻?

v.qq.com圖標

為了提供更多開箱即用的價值,微軟為Microsoft Dynamics 365創建了混合現實版應用程序。現在企業可以立即通過HoloLens 2來滿足工作場所的需求,無需再僱傭一大批開發者。

繼Dynamics 365 Remote Assist和Dynamics 365 Layout之後,Dynamics 365 Guides成為了微軟開路商業混合現實應用程序的又一探索。Guides允許企業將紙張和屏幕的培訓材料變成一種身臨其境的三維體驗。

「所有人都希望成功,而幫助新員工迅速上手工作的能力十分寶貴。」PACCAR ITD全球技術與運營的高級總監羅伯·布蘭森(Rob Branson)如是說道,他的公司已經試用了Dynamics 365 Guides的早期版本。

他指出:「如果你想想成年人學習的方式,你會發現視覺的佔比非常高。能夠看到步驟式的指南疊加在物理對象上可以加快員工學習一項新任務的速度。」

HoloLens 2顯然考慮到一線工人。與初代HoloLens相比,它更輕更舒適,重心更為平衡,這樣用戶就能整天佩戴。全新的翻蓋式眼罩可允許工人輕鬆切換物理世界和全息世界。

PACCAR員工佩戴的設備就像帽子一樣能夠輕鬆滑動,他們可以訪問步驟式的全息指令,並在其幫助下完成組裝卡車門等不熟悉的任務。在Dynamics 365 Guides中,點亮的箭頭可以清晰說明從每一個步驟,如線纜需要通過的孔洞或所需工具的正確位置。

疊加在卡車門的全息圖說明了員工應如何執行所述任務,全息圖同時點亮了鋼板之下的結構,而如果沒有X射線等技術的支持,常人通常無法看到鋼板底下的結構。

對於勞動力老齡化的行業,企業迫切需要迅速把相關的工作智慧傳給下一代工人。在以往,這通常需要數年的學徒時間或數十年的工作經驗才能積累實現。

例如,對於新加入阿拉斯加航空公司的機械師,他們原本需要大約兩年的時間才能完成所有的培訓。混合現實工具可以顯著減少新人的學習曲線,而沉浸式培訓環境同時能夠令伴隨著電子遊戲成長的新生代員工產生共鳴。

阿拉斯加航空公司戰略總監麥克·羅倫戈(Mike Loreng)表示:「紙張變得栩栩如生。我看到的不再是一張二維紙張,而是投影至引擎的3D內容。」

4. 人與物之間的智能對話

當利用智能邊緣和智能遠端的不同功能時,混合現實可以變得更加強大。

在一些情景中,你希望能夠在智能邊緣快速處理信息,而不是將數據發送到雲端,例如可以提醒你即將發生安全風險的攝像頭或控制制動系統的演算法。在工廠車間,並非每個感測器的所有數據都與「此時此刻」相關。因此,在邊緣運行不太複雜的AI服務可以幫助過濾掉不相關的信息或執行不需要雲端支持的任務。

如果你需要全息圖來幫助潛在客戶設想新車的樣式,單台HoloLens 2即可通過板載功能提供充足的計算能力和解析度。

但如果將設備連接至全新的Azure Remote Rendering混合現實雲端服務,你將可以快速生成複雜的三維數字模型,而原本企業可能需要花費數天或數月的時間才能構建出與之媲美的模型細節。如果沒有雲端的圖形處理能力,這是不可能實現的任務。

懷特指出:「突然之間,混合現實從一種新奇玩意變成了能夠增強你工作的真正用例,並可以完全取代一整個商業流程。例如,以其中以往無法實現的方式來使用完整的數字建築。」

通過賦能現場工作人員快速診斷和修復對運營至關重要的機器,PTC的物聯網和混合現實工具可以幫助企業最小化停機時間。

〔映維網〕PTC HoloLens 2_騰訊視頻?

v.qq.com圖標

對於微軟合作夥伴之一PTC新開發的系統,其已經集成了物聯網邊緣解決方案,Azure雲和混合現實工具,從而對從航空航天到國防承包等一系列企業進行了數字化轉型。

PTC首席執行官吉姆·海佩爾曼(Jim Heppelmann)指出,你可以設想一下這樣的情景:在第二天來到實驗室後,研究人員突然發現處理血液樣品的關鍵機器已經停機。接下來會發生什麼事情呢?

在幾年前,閃爍的燈光或模糊的錯誤信息可能是唯一的線索。她可能會打電話給製造商,他可能會通過電話方式來診斷問題。最有可能的是,實驗室不得不為把在那座城市工作,甚至是在另一座城市工作的維修人員派往現場。重新運行機器可能需要數小時或數天的時間。與此同時,擔心血液結果的患者只能無奈地苦等。

今天,藉助ThingWorx for Azure服務,她可以戴上HoloLens 2設備並查看全息儀錶板,其中每個組件的運行狀況和狀態都會映射到物理機器。由微型物聯網感測器採集並發送到Azure雲的數據可能會診斷其中一個問題。然後,這位研究人員可以訪問步驟式的全息說明,逐步打開蓋子,翻轉槓桿,插入新零件。如果她依然無法診斷問題或解決問題,坐在內布拉斯加州辦公室的維修專家可以通過HoloLens 2看到其面前的一切,並通過語音和全息指示引導她完成操作。

海佩爾曼說道:「這是人與物之間的封閉循環。物聯網設備告訴我錯誤所在,混合現實解決方案則將我與能夠輕鬆解決問題的專家對接,從而節省花費在通勤路上的時間與金錢。」

他進一步指出,對於可能需要長時間佩戴混合現實頭顯的一線工人來說,HoloLens 2提升的舒適度與視場具有十分重要的意義。

他表示:「這兩點令HoloLens從有趣的原型變成了能真正廣泛用於工廠,醫院和建築工地的實用性工具。這是一大進步。」

這些功能對微軟的另一個合作夥伴Bentley Systems而言同樣重要,他們主要是為正在展開複雜的大型基礎設施項目的工程師,建築師和建築公司開發軟體。

負責項目交付的高級副總裁諾亞·艾克豪斯(Noah Eckhouse)表示,當站在存在大量活動組件的平台和需要操作重型設備來檢修城市火車站或足球場時,俯視手機或平板電腦上的信息可能非常危險。HoloLens頭顯則允許工作人員在感知物理環境的同時自然獲取數字信息。

〔映維網〕Bentley HoloLens 2_騰訊視頻?

v.qq.com圖標

通過HoloLens,這家公司的SYNCHRO軟體允許工人放大施工現場的特定位置,並訪問相關的重要數字信息,如安全指南或安裝說明。管理人員可以從三維視圖預覽兩天後或三周後的效果,並基於不斷變化的現實來預測潛在的計劃衝突。

他表示:「建築工地就像是一場大型的芭蕾舞表演,一切都需要非常精心的編排,而材料和人的運動都必須存在於一定的空間內。計劃表從你開始的第一天就要改變。」

儘管可以在單台設備存儲和更新兩居室平房的計劃,但如果沒有雲計算,你將無法跟蹤大型基礎設施項目中的所有活動組件。

通過將作業現場上的每台HoloLens設備連接至在Azure中不斷更新的主模型,SYNCRHO能夠確保每個人都是使用相同的共享現實,並通過最新信息來排序作業,計划起重機移動,跟蹤進度,並確保工人安全。

艾克豪斯認為:「雲端連接至關重要,因為對於這些大型項目,現場與工程師和設計師之間的來回信息傳遞是在不斷地進行。在物理世界中開展基礎設施項目的任何影響可都是來真的。」

5. 將強大的感知工具帶到邊緣

計算機視覺和人工智慧的兩項決定性成就給HoloLens 2的沉浸式體驗做出了貢獻。通過語義理解來解釋物理空間的能力允許設備區分牆壁和窗戶,或區分沙發和咖啡桌。自然手部追蹤則允許人們更直觀地旋轉和擴展全息圖,而不是必須學習模仿滑鼠移動的手勢。

這些進步得益於第四代的Kinect,並結合了在邊緣運行的AI工具。這種深度和動作感知技術最初是在十年前開發,並旨在為Xbox創建手勢識別附件。但對於可以準確感知深度並確定人體在空間中移動的能力,其潛力遠遠不局限於遊戲。

例如,Ocuvera正與Azure Kinect合作開發這樣一種系統:旨在幫助防止每年在美國醫院發生的大約100萬次跌倒,甚至是全球範圍內的更多跌倒。他們研發的系統可以感知需要幫助行走的患者是於何時無助地下床,並提前預警護士以提供幫助。

利用深度感應攝像頭和人工智慧演算法,系統可以在患者起床前識別出運動模式,如坐起或擺動腿部的動作。11個臨床試點的初步研究結果發現,在實施上述技術後,無輔助和未留意的下床行走減少了90%以上。

首席執行官史蒂夫·凱恩(Steve Kiene)表示,Ocuvera團隊調查了世界每一台深度感應攝像頭,甚至試圖開發自家的深度感應攝像頭。但對於區分病人是向前移動抑或只是翻身,沒有任何一款設備能夠接近於Azure Kinect的準確性和解析度。

他說道:「這就像玩撲克時的認牌一樣。只有Azure Kinect能夠為我們提供可以真正了解患者在病床上發生的情況,並以足夠的準確度預測其意圖的數據。當我們在醫院進行試點測試時,他們經常告訴我們這是不可能的做到的事情,但隨後他們發現它確實有效,而且他們感到非常驚訝。」

凱恩認為,新的Azure Kinect的價值在於它將感測器硬體與Cognitive Services等Azure工具結合在了一起,使得開發者能夠輕鬆快速地部署AI解決方案。這可以幫助Ocuvera團隊更輕鬆地將語音識別或語言翻譯等服務集成至系統之中。例如,支持患者以多種語言呼叫護士。

隨著越來越多的服務移到邊緣,它們無需將數據發送至雲端即可在本地運行。

凱恩指出:「Azure Kinect不僅僅是一個攝像頭,它與所有其他非常重要的服務相連,如語音識別和身體追蹤。這一整個服務包非常有價值。」

為了幫助HoloLens 2成為世界上最具沉浸感的全息計算機和最為智能的邊緣設備,基普曼已經投入了十多年的時間與精力。他表示,任何發明家的真正回報都是基於人們可以在其創新基礎上做什麼。

基普曼解釋說:「我們把全副身心和所有醒著的時間都用於締造這個願景,並將其付諸實踐。現在,我們終於可以看到這項技術將如何幫助我們的客戶進行市場競爭,進行數字化轉型,實現以前無法實現的目標,做一些我們從未想像過的事情,令我無比興奮的事情。

〔映維網〕微軟 HoloLens 2 MWC演示_騰訊視頻?

v.qq.com圖標

HoloLens 2 MWC現場演示(來源RoadtoVR)


目前已經不算是利益相關者了,不過算是微軟的目標B端用戶之一,因為之前工作的原因,我大概使用過市面上90%以上的ARMR眼鏡或光學模組,並且在Hololens一代上做過具體的產品開發和具體的應用,所以對AR眼鏡還有一些實際體感。本次發布會沒有第一時間看直播,早上看了一下重播和一些平台的相關解讀,主要還集中在發布會本身內容的解讀上,但是我個人覺得微軟的布局全面且完整,非常有計劃性,所以這裡也給一些個人觀點。

PS.儘管微軟稱自己為MR,但是我個人習慣,後面回答統稱AR。別的回答配了很多圖,這裡也就不配圖了,手機打字方便一點。

1.產品進化

首先,儘管Hololens已經發布了4年,但是這些年裡包括Magic leap one在內,依然沒有出現過可以全面超越Hololens一代的AR產品,大部分產品只是換了賽道或更垂直化而已,看起來在AR領域目前能超越微軟的只有微軟自己吧。有關這次產品的迭代,主要從四方面來說

(1)顯示:

核心改變是更大的視場角和清晰度,這兩個都是之前很多其他眼鏡重點抨擊或說自己超越hololens的指標之一,不能說這些完全沒有意義,但是目前也還並不是問題的關鍵。我相信微軟有足夠的能力產生更大的FOV,亮度、飽和度,或清晰度,但是綜合考慮硬體設備的能耗,計算量和交互,這大概是目前微軟可以提供的最好的視覺體驗,對比之前我體驗過的其他眼鏡來說,這個視場角是完全可以滿足B端用戶的需求的。

值得一提的是,微軟在直播中給大家呈現的內容一直使用了一種技巧,那就是畫面上的虛擬影像內容雖然和眼鏡里是一樣的,但是眼鏡里卻無法看到和第三人稱一樣的範圍,微軟有一套完整的第三人稱直播方案,類似於AR演播室的技術,在攝像機上面綁定一台Hololens用於計算攝像機的POSE信息,同時與使用者的Hololens共享世界坐標系,但是渲染應該不是在本地完成的。所以第三人稱看起來的畫面非常科幻且美好,但是Hololens的使用者看到的並不是完全一樣的畫面,大概是通過一扇FOV52度的窗戶去看的感覺。

綜合來說,本次顯示方案的提高應該暫時保證了 Hololens的光學方案不會被行業內的其他人所詬病,但是正如發布會上所說,這樣的沉浸感對於C端用戶來說依然還沒有完全達到期待。

(2)交互:

Hololens一代主要提供三種交互方式,手勢(常用手勢只有幾種,並且是語義級的,也就是必須做對可識別的手勢才能被解讀為某種具體的指令,比如確定或退出),Pad(這個是一代最高效的交互方式,但是相對眼鏡這種設備,PAD的操作顯得過於復古且不自然,所以很多應用都不是必須項),語音(大概是最主流的交互方式,但是之前好像只支持英文)。

而Hololens二代相比顯示能力的提高,我個人認為交互才是這次硬體升級的重點,首先是支持多自由度的手勢操作,包括點擊,觸碰,拉拽等自然交互,這會大大提供整個操作系統的操作效率,基本達到了三維空間中滑鼠的基本作用。眼動追蹤則完全配合了眼鏡這種載體的設計,更加符合人對於視覺信息的獲取方式,雖然目前提供的交互功能還很簡單,但是未來的可擴展性會非常可期。語音交互依然還是重點,隨著智能手機語音化交互的更新,未來語音交互會更加被人們適應,包括應用的打開,基本功能的搜索,和系統的問答,語音其實也都是更快的方式

綜上,第二代的hololens終於帶來了比較像樣下一代眼鏡交互方案的雛形,更自然和便捷的信息交互效率會更容易吸引一些傳統企業的B端客戶來使用。

(3)服務:

這應該是微軟這幾年一直在修鍊的內功部分,畢竟再優秀的硬體如果沒有搭配殺手級的應用也只是一個殼子而已,微軟已經很明確的展示了自己服務B端的決心,所以本次發布的新服務是Dynamics 365 系列的Guides,基本完全針對B端的,從發布會的內容來看,這是針B端客戶培訓方案的整套服務,簡單來說,可以用這樣一套服務,跨平台終端的來進行不同行業員工的培訓方案的創建,編輯,和教學使用。並且應該支持遠程協助和多人多設備協同。這樣的服務是非常符合微軟在這幾年探索的結論了,我基本看過微軟在youtube發布的大部分演示視頻,遠程指導和培訓則是其中很大一部分。

這個應用從幾方面來看都符合AR眼鏡服務B端的定位,首先該方案需要對場景信息有高精度的解讀和交互,同時需要使用者可以解放雙手進行實地操作並保持高效率的和周圍信息互動,包括信息的讀取和界面的操作,另外,無論是指導還是培訓都可以降低很多成本,包括培訓周期的縮短,培訓空間和設備節約,同時可以最大化的利用頂級專家的經驗。從產品設計理念來說,這應該是微軟這幾年應用以後得到的寶貴經驗,更多的細節可能需要使用這個服務才能評價。

(4)云:

對我個人來說,這個是最讓我激動的消息,這意味著hololens終於不會再停留在DEMO階段,而是要真的落地服務實際的業務了,本次發布的雲服務主要是兩個,一個是Azure Spatial Anchors,主要用於幫助跨平台設備可識別不同的空間或地標信息,至於如何完成不同SDK直接對於同一信息位置的再識別,目前還沒有很明確的依據,但是這個服務打通了Hololens,Arkit和Arcore意味著微軟已經做到了這一點(從SLAM演算法來說,重定位並不困難,但是重定位並統一不同的演算法架構之間的世界坐標信息,這還是非常大的工程)。另一個則是Azure Remote Rendering,從發布會來看,主要是基於雲端渲染對端側進行的無損3D模型的下發,這項目服務可以保證本地渲染3D模型更優質的質量。

結合這兩個服務來看,Hololens不再是需要基於本地進行的「定製化」開發並使用的設備,同時也不再限制於單一的終端,而同時覆蓋了iOS和安卓兩大移動系統。雲化以後的AR服務可以跨平台,跨地域的提供高質量的全息體驗,簡單說,Hololens具備真正的移動能力和對外連接的能力。

2.Hololens應用的實際情況

目前hololens在實際應用中,主要有三大類的服務:

第一類是信息展示,也就是基於已經數字化的操作流程,藉助AR設備進行透出,這類信息只需要和現實場景有最淺的連接關係,比如藉助人的交互提供信息,或對場景本身有基本的識別能力即可。但是這類服務的重點不在於顯示方式,而是在於後台數據的整理,在hololens二代發布之前,Azure也提到了為IOT設備的服務能力和目前的規模,這個本質是對於基礎數據的獲取,以及與物聯網的連接能力,沒有這些服務B端的AR設備就沒有靈魂,只是一個DEMO的殼而已。

第二類是協同服務,這裡不論是多人協同,還是專家遠程協助,其核心首先是場景、數據和交互的共享,是在第一類信息展示服務的基礎上增加人與人的溝通合作,這裡主要的能力在於交互和信息共享的效率,這一點隨著二代硬體能力的提高,和雲端服務的加入,應該會有比較大的進步。

第三類就是真正的AR交互,基於實物進行高精度的視覺增強,這一步仍然是目前最大的瓶頸之一,因為大部分高精度的AR互動都需要預先得到交互實物的三維模型,同時也需要進行視覺增強信息的坐標的對齊才能保證比較好的效果,一個看似非常酷炫的實物交互需要預先準備大量的數據和交互素材,這對於實際客戶來說都是很高的成本,拋開PR的需求,實際作業中除非真的需要大量使用的實物才會製作類似的AR交互,也可以看到發布會上微軟主要展示的也是全虛擬的模型交互而非實物交互。

以上三類AR應用的服務目前的Hololens的都可以滿足,但都對使用的客戶有較高的要求,數字化是基礎中的基礎,試想一個全手工作業的工廠無論如何也很難使用Hololens進行相關作業的優化,所以微軟的用戶大部分是作業流程化很高的客戶,本身基於數據驅動管理,但是缺乏更高效的培訓,管理,協同手段。同時該企業也需要一定的自主開發能力,微軟可以給予的配合大部分也是介面的提供,而不是具體應用的開發,同類需求多了微軟會沉澱成應用,類似Dynamics 365系列。從本次發布會的內容來看,hololens的開發門檻確實在逐步降低,但是依然不會適合大部分的企業,大概在暫時還處於和國際化頭部品牌的合作和嘗試。

3.微軟的戰略布局

本次發布會可以看出來微軟對AR的布局思路已經非常清晰且日趨成熟。首先最大的改變仍然是雲化的AR服務,這代表微軟已經完成了AR在不同行業的試水工作,雲化可以帶來海量數據的積累,用來幫助微軟收集環境,模型,應用交互等信息并迭代優化其自身的AR服務,同時也極大增強了同一類AR服務的可覆蓋範圍,這也同時表明微軟對於這一代Hololens是非常有信心的,因為穩定且統一的演算法才能讓其服務雲端化。

另外,本次微軟又再次強調開放的態度,到目前為止,其開放的目標客戶很明確,並非是個人開發者,而是可以幫助豐富AR生態的頂端服務商,包括各類引擎,創作工具,設計工具等,這是微軟不得不走的一步,目前的市場規模太龐大,沒有強大的生態支持者,僅靠微軟自身的開發能力依然不足夠滿足市場需求,同時優質的開放生態夥伴可以幫助微軟快速進入不同行業,或接觸更多的B端客戶。儘管目前還沒有接近hololens的對手,或者準確說,是基於微軟體系下hololens的競爭者,但是垂直化的AR設備或服務肯定會源源不斷的產出,只有保證自身生態的完整性,才能抵禦這類垂直的攻擊。

最後,本次hololens雖然使用了高通晶元,但是沒有搭載5G,而還是依賴於Wi-Fi,這也說明微軟本次發布的產品是比較務實的,在5G基礎設施建設沒有完成之前,任何多餘的功耗和硬體功能增加可能都會帶負面的影響。目前的AR雲服務無論是地標的上傳和下發或者對於高精度3D模型的下發,對於帶寬要求都非常高,使用更穩定的Wi-FI網路支持可以使得該服務更加穩定。當然隨著5G的普及,對於AR服務肯定是非常大的利好。

4.微軟的野心(軟粉的自吹~)

這是本次發布會體現的最明顯的一點,微軟雖然全程都是很技術的展示,但是野心卻絲毫也沒有掩飾。如果把未來的公司比作一個廚房,那麼雲服務大概是水電煤,數據就是基礎原料,AI演算法服務是不同的菜譜,操作系統則是一台功能齊備的廚師機,目前這廚房裡的所有設備微軟全都齊備,並且都在為未來布局。這表明微軟幾乎可以提供一套完整的B端公司的管理服務,而且不僅如此,單獨使用任何其中一個設備對接其他品牌的廚房,微軟也願意提供,同時微軟也在嘗試把其中某些設備做到最好,好到幾乎不給其他公司任何機會,這種既開放又完整的全鏈路服務真的讓人覺得發自內心的欽佩。

如果說蘋果是C端的霸主,那微軟大概就是B端的王者吧。


寫的時候很激動,文筆不好,但是乾貨為主,獻醜,哦對了,圖還很多。

給科技圈外的人,根本不敢相信,總覺得是電影中的片段,甚至一代的時候某果粉社區還說是微軟渲染的概念視頻,還有人信,我可是真的體驗過一代的!兩次,在北京…

2015年我還在上高中,Hololens真的讓我感到神奇,從未有過的感覺,慶幸自己活在這個時代。未來已經在我們面前了,少數派報告里的炫酷科技真的就這麼被帶到了消費者手裡,誰知道未來還有什麼會來到現實世界幫助這個世界進步。

現在這個產品真的要大規模應用了,這是另一個像iPhone一樣改變人類生活的產品。

真幸運生在這個偉大的時代,見證了太多。

最大的進步就是解析度,雙眼解析度大幅提高,視角2x相比上一代,Kipman的話講「這是從720P到2K的進步」。

掃描了世界各地人的頭部模型,設計了貼合人腦的舒適感,戴眼鏡也不用擔心。

安全性很強同時很方便,帶上設備直接虹膜識別解鎖。

識別人手的狀態,五個手指的狀態,給了開發者無限的可能。

按下按鈕,推動滑塊等互動效果,真的給了用戶合理且滿足的反饋,要知道這不是實體的按鈕啊。

還有電影中的虛擬視頻會議,雖然現在看起來還很滑稽吧,但是還是很震撼。

Hololens Customize Program,確保這個產品真的能適應各種環境,實現更多價值,更好的幫助人類,微軟真的是人類科技不可缺少的一家公司。

希望微軟別在營銷上拖後腿,廣告鋪滿,人盡皆知,讓大家感受到未來的到來。


推薦閱讀:
相关文章