谷歌3D全息視訊會議黑科技爆料，不久將迎來3D「模式盛宴」

Google I/O 2021開發者大會（後文簡稱谷歌I/O）近期已落下帷幕，去年因新冠疫情而被取消之後，今天我們看到的是谷歌積攢了2年創新技術輪番轟炸：3D全息視訊聊天Starline，第四代定製AI晶片擁有十倍效能的TPU V4，兩項先進的深度學習技術：聊天不設限的語言模型LaMDA和MUM，同時每年一更的Android 12重磅登場。大會採用全程線上的形式，對所有人免費開放。

在眾多成果中，令人最驚歎的莫屬於Project Starline項目。

據悉，Project Starline這項計劃已經研發5年時間，研究的主題是3D視訊通話。在疫情期間，很多人無法和親人、朋友相聚，而谷歌推出的「聊天室」可以讓你和遠在天邊的他們近距離碰面，互相問候、眼神交流，就像真的互相見到一樣。這個名為Starline的3D視訊通話技術，讓螢幕另一邊的人看起來有體積、有深度和陰影，就像坐在你的面前一般真實，更令人詫異的是視訊期間裸眼3D，不需要佩戴任何眼鏡或者頭盔。這背後的原理是什麼？

實際上，這是由高解析度感測器、數十個景深掃描感測器以及 65 英寸「光場顯示器」重新生成的實時 3D 模型。谷歌表示這一項目已開發了數年之久，其背後是大量計算機視覺、機器學習、空間音訊和資料壓縮技術。可以看到，螢幕中不再是二維畫面，而是與真人一比一的三維立體原顯示，對方每一個表情、身上的動作，甚至陰影都能「真實」展現，就像真的坐在眼前一樣。谷歌還為此開發出了一套突破性的光場系統，讓人無需佩戴眼鏡或耳機即可感受到逼真的體積和深度感。就連谷歌AI掌門人Jeff Dean都表示大受震撼，可以稱作「魔鏡」。

當然，一般的攝像頭肯定不行，必須能拍出立體影像，而且拍攝角度也不能單一。據谷歌的介紹，Starline用到的裝置是一個65英寸的光場顯示屏，以及在現場佈置的十多個攝像頭和感測器，從多個角度捕捉使用者的外形和外觀，形成3D模型；其實就是模擬人眼去感知對方，在「腦中」形成立體畫面。這些感測器從不同角度捕捉人的形象，使用深度學習進行實時壓縮，傳輸到另一邊再重建成3D影像播放出來，這期間每秒產生的資料可多達幾千兆位元，當前的網路肯定傳輸不了，更別說還是實時的。所以，為了可以通過現有的網路傳送如此大尺寸的影象，谷歌開發了新的壓縮和流媒體演算法，使資料體量減少超過100倍。這樣下來，一般的辦公網路才可以流暢使用。說到這，你是否注意到，使用者並沒有佩戴任何3DAR眼鏡或者頭盔之類的裝置，那為何螢幕上還能出現3D立體效果呢，這其實就是在使用者面前的那塊65英寸的顯示器-光場顯示器。這塊光場顯示器也是谷歌特別研發，可以展現對方的真實面貌。

「我們的目標是讓谷歌為每一個人提供更多幫助」谷歌執行長桑達爾 · 皮查伊說道。

在新技術應用層，谷歌計劃將Project Starline引入給醫院和媒體機構在內的商業部門洽談合作。雖然Starline項目還在研發中，但希望它能儘早被安裝和使用，早日被應用在生活中。

而不管技術怎樣發展，我們普通人對於未來便捷生活都離不開「3D視訊」新技術的概念。隨著新的演算法不斷的升級，AI技術深度計算讓資訊處理更加高效，3D的效果會更加逼真、更加極致。不僅僅是谷歌，蘋果等科技巨頭在深入研究，微美全息作為深耕全息3D行業也在不斷的優化現有的逼真體驗，也不斷的擴大新的場景化落地。值得肯定的是，微美的5G全息通訊視訊聊天，真實感就像是在現場拍攝的而不是電腦渲染出剪輯畫面，這項發現是整合了計算機視覺、AI智慧學習、空間音訊、先進的壓縮、深度感測攝像頭和一個巨大的擁有「光場技術」的顯示器來實現。該螢幕允許在不需要特殊眼鏡的情況下檢視高解析度3D影象，深度攝像頭確保能夠看到參與者的多個角度。就好比上述提到的Goodgle的「墨鏡」，大家在開視訊會議時，螢幕對面彷彿是裸眼3D,在全息3D視訊聊天中大家的人臉都能夠完美成像顯示。這項有趣技術的發現能夠讓交談者們確認真實的自己與其他人是確實在同一個場景中，相隔甚遠也在面對面開會議，真實坐在面前互動、交流，就像平時開會那樣。後續，微美期望能夠進一步完善對線上會議音訊降噪、視訊優化效果等的操作。

在高科技的今天，我們更期待的遠距離見面方式是這樣的：雖然相隔萬里，也能立刻全息投影出現在對方身邊。雖然目前還不能不靠任何裝置實現這樣的全息投影，但是動態3D重建技術已經發展起來，利用AR全息裝置來呈現。人類對於未來科技的探索，就如同對海底世界的研究，未來誰能在這方面做得更優異，就能有更好的競爭力。