1. 如何看待黑科技有新的黑科技面世時，你會去嘗試嗎
全息透鏡作為一種高匹配的增強現實眼鏡，已經廣泛應用於工業甚至軍事領域。但這一次，陀螺君居然在HoloLens上看到了游戲應用的出現，讓佩戴者用皮卡丘框起來。這是上周在IT活動Ignite 2021上，微軟與任天堂合作展示的Pokemon Go的HoloLens版本。這個版本和以前的手機版本不一樣。玩家可以直接與寵物精靈互動，兩個玩家可以在現實中相遇，看到對方的寵物精靈，進行寵物精靈之戰。相比口袋妖怪Go，微軟對黑科技「全息悄搭裂傳輸」的復制更引人注目，微軟技術研究員基普曼通過全息投影出現在會場。
微軟對Mesh的定位主要是創造一種可以跨屏、自然交互、與真實視圖和人交互的體驗。所以平台需要圍繞微軟現有的HoloLens平台、MR頭戴式平台以及更常見的平台進行設計。事實上，Mesh平台從跨平台支持、雲服務、LBA AR支持等多個方面定義了未來XR應用的一些特性。從每個功能的單一角度來看，都有相應的企業和服務面對一些蓬勃發展的特定用戶群體。
1.與其他微軟平台和工具交流
Mesh基於Azure，可以和其他微軟平台和工具進行通信。藉助身份服務，如Azure活動目錄和微軟帳戶，用戶可以在適當的身份驗證和授啟閉權後進入安全和可信的會話。微軟圖形允許用戶在商業或消費者空間訪問內容和聯系人等信息。而且作為開發者，不需要擔心計費、音視頻傳輸等核心基礎設施，以及底層的實時管理功能。除了核心平台之外，微軟由AI支持的關鍵功能使Mesh能夠通過為MR實施大規模多用戶在線(MMO)場景來解決一些復雜的技術挑戰。
2.存在感
Mesh提到的在場主要指兩點。第一點是有代表性的頭像。在多用戶MR體驗中，不同類型的設備使用不同的代表性頭像，這些頭像可以由用戶定製。Mesh為用戶提供具有代表性的3D頭像，並通過設備的由內向外感測器呈現。Mesh平台有自己的頭像和定製製作工具，可以直接使用頭像。此外，該平台還可以通過其AI驅動的動作模型，幫助現有頭像捕捉與用戶動作一致的動作和表情。
第二點是通過由外向內的感測器實現真正的360度全方位拍攝，可以自定義相機設置，比如通過Mixed Reality Capture Studio高保真保存拍攝的3D圖像，或者用Azure Kinect拍攝深度敏感的應用圖像，幫助生成全息圖像。全息圖生成後，基於網格開發的應用程序可以在XR頭顯示器或手機、PC或平板電腦上啟用，以使用全息圖並將其呈現給用戶。
3.空間地圖
在Mesh出現之前，各種設備只有自己的局部世界地圖，在Mesh的幫助下，這些局部緩存地圖可以進行合並和優化，形成對空間和環境的全局理解。這個框架錨定內容，分享願景，並在3D中合作。Mesh創建的地圖比GPS更精確，即使在GPS無法定位的空間。它有助於傳遞與特定興趣點相關聯的「世界鎖定全息圖」。此外，網格可以生成與給定對象的精確布局和幾何對齊相同的理解，以便開發人員可以輕松構建可能需要被視覺信息覆蓋的應用程序對象，這些視覺信息將對象與視覺信息(如指令、服務記錄和其他重要數據)完全匹配。
4.全息渲染
全息渲染是智能邊緣雲計算和智能雲架構的典型例子。在Mesh的支持下，全息渲染可以實現高保真，不需要設備的操作和功耗。網格允許開發人員通過雲連接為每個場景和模型在本地獨立渲染和遠程渲染之間進行選擇，使開發人員在設計應用程序時具有更大的靈活性，可以根據不同的設備優化延遲和保真度。而且全息渲染還支持大部分3D文件格式，在啟用Mesh的應用中進行局部渲染，解決了引入用戶現有3D模型進行協作的問題。
5.多用戶同步
對於開發者來說，在虛擬協作會議中創建一個共同的全息圖視角並相互交流是一個很大的挑戰。在網格中，共享內容是通過多用戶同步來實現的，這將有助於更新參與者的姿勢、動作、表情或空間全息圖的變化。所有這些都發生在100毫秒的延遲內，無論是在相同的物理空間還是在不同的時區。Mesh中的空間音頻會增強這些功能，從而創造出多用戶場景中處於同一物理空間的感覺。
據微軟稱，為了利用這些功能，Mesh將為開發者提供跨平台的SDK，讓開發者可以針對不同的設備類型創建應用。目前Mesh與C++和C#一起支持Unity，未來幾個月Mesh將支持虛幻、巴比倫和React Native。除了訪問功能，軟體開發工具包還為開發人員在應用程序中使用提供了一個預構建的UX結構。這將使開發人員能夠更快、更簡潔地提供磁共振體驗。隨著Mesh平台的出現，這一系列新功能匯集在一起，成為XR應用的特色呈現。這種融合把零星的技術方向變成了整體，讓XR的概念一步步具體化，這是它最大的貢獻。
Mesh背後的Azure智能雲的價值
基於Mesh開發的XR應用可以廣泛應用於很多領域和場合，這主要歸功於Azure智能雲帶來的價值。Mesh的虛擬協作功能使跨時區的用戶能夠以數字方式聚集在一起，一起討論和理解他們，這有助於更快地查看數據和做出更好的決策。用戶可以隨時一起訓練。得益於Holoportation(微軟開發的3D視頻採集系統)、全息共享和可視化功能，合作夥伴無需在路上花費時間和精力就可以面對面學習。
比如在遠程醫療中，專家可以看到其他醫生的診斷，並覆蓋數據以保證共識，更好的解決問題，共同決策。設計師和工程師可以一起進行3D設計，團隊成員在參與設計時可以用不同的設備分享想法和創意。同事們可以在內容上實時合作，要麼親自合作，要麼通過全息傳輸。Mesh的多應用場景和基於雲計算平台的azure的本質，意味著微軟Azure行業和MR業務的拓展。
微軟技術研究員亞歷克斯·基普曼(Alex Kipman)表示:「從一開始，這就是混合現實的夢想。」其實你可以感覺和分享內容的人在一個地方，也可以從不同的混合現實設備中傳輸，即使沒有物理上的在一起也可以和人在一起。"
他認為，隨著越來越多的人活躍在網格平台上，我們所有人都參與了Azure智能雲的價值構建。在這些協作體驗中，內容不在當前用戶的設備或應用程序中。全息內容上傳到雲端，意味著用戶佩戴的混合現實設備只需要負責視覺效果和交互的沉浸式呈現。對於計算能力有限的個人來說，這是一個飛躍。"最重要的是，隨著XR應用在Meah平台的逐漸發展和成熟，更多前所未見的安全隱患和網路安全事件成為關注的焦點。與之前的體驗相比，在基於Azure的智能雲Meah平台上獲得的全新AltspaceVR體驗，可以讓公司使用企業級安全功能(包括安全登錄、會話管理和隱私合規)在虛擬現實中舉行會議和工作聚會。
Azure智能雲為Meah提供了容納大量模型場景和角色的前提條件，這也是平台區別於傳統APP的地方。你可以理解，在XR環境下，應用之間的穿梭更像是城市之間的旅行，其間不會有下載過程，也不會有硬體計算能力適配的問題。事實上，從2020年底開始，各大廠商都開始全面實施基於雲服務的平台服務戰略。其中Epic的數字人類平台和HTC的VR社交平台都擁抱了雲技術。雲計算的力量和資源將被分配到每一個普通消費者手中，以獲得更安全、更具性價比的XR體驗，這也是XR行業普及的曙光。
微軟在XR布局上不遺餘力，就像技術總監亞歷克斯·基普曼(Alex Kipman)從「海底深處」突然「閃現」，然後以一段詩意而浪漫的朗誦開始——一個人的夢想只是一場夢，一個大家共同夢想的夢，就叫現實。錯失移動互聯網機遇的微軟，正在結合雲計算在MR領域的優勢，讓大家更接近未來。網眼絕不是錦上添花。如果保持這個優勢，擁有XR底層開發系統和雲計算支持的微軟，將會定義XR未來的一些標准。