時隔兩年Google I/O大會再次與大家見面。雖然去年的大會因新冠疫情被迫取消，但技術的迭代發展卻未被打斷，反而因疫情的影響促使了技術的創新變得愈加以人們的需求為首要考量，從而變得更具人性化也更具智能化。

整理 /?LiveVideoStack

“在重要的時刻提供幫助”——是此次谷歌 I/O 2021大會的主題。從充滿人情味的主題開場，并圍繞AI在視頻聊天、地圖、醫療診斷、數據安全等方面發布了一系列最新的技術進展。而在音視頻領域中最值得關注的是：全息視頻聊天技術——Project Starline，谷歌AI芯片的最新版本——TPU v4，以及基于AI模型的皮膚病問診應用程序。

Project Starline 3D視頻聊天新體驗

Project Starline 3D視頻聊天互動 演示

該項技術可以說是本次大會的絕對黑科技了，使一些無法進行線下見面的人們（如：疫情影響）能夠在同一空間中進行實時的3D互動聊天。據悉，Project Starline利用全息影像技術打破人們身處不同空間的隔閡，并與傳統的視頻聊天的區別在于，讓你想見到的人就“坐”在你對面，感覺像是真的在你身邊一樣。

如圖所示，就好像置身在一個「3D聊天室」當中

而為了實現這一技術，在硬件部分谷歌采用了65英寸的光場顯示器，并配備了定制高分辨率傳感器和數十個景深掃描傳感器，從多個角度捕捉用戶的外貌和動作，然后進行融合，并在聯合驅動下生成流暢細致的實時3D模型。由于其所產生的數據每秒高達數千兆字節，因此，對于在現有網絡上發送如此之大的圖像，谷歌研發了新的壓縮和流算法，可將數據減少100倍以上。

關鍵突破包括3D成像，實時壓縮和3D顯示

而在軟件部分則是通過在計算機視覺、機器學習、空間音頻和數據壓縮技術等方面數年之久的開發，通過硬件與軟件的整合才得以實現今天的Project Starline。除此之外，突破性的光場系統也是支持這一技術的亮點，讓人們可以免去佩戴眼鏡、耳機就能體驗到逼真的體積和深度感。

目前Project Starline僅在谷歌的幾個辦公室中被應用，由于它依賴于定制的硬件和高度專業化的設備，還未在市場中進行推廣。

新定制AI芯片TPU v4：性能提升10倍

在谷歌 I/O大會中還推出了谷歌最新定制的AI芯片——TPU v4。這類定制芯片對其所要處理的AI任務有著數量級的性能優勢，如圖像識別、語音助手、視頻、視覺計算處理等。而TPU v4的動力來源于v4芯片，其速度是v3（上一個TPU版本）的兩倍以上。TPU v4：一個Pods里面有4069個v4芯片，可以提供每秒 10^18 次浮點運算；并提供一個exaflop以上的容量，相當于一千萬臺筆記本電腦的計算能力之和，性能比上一代提升了10倍。Sundar Pichai表示：“這是我們部署過的最快的系統，對我們來說是一個歷史性的里程碑”。而全球超算TOP 500排行榜第一名的日本富岳的最高性能也只有它的一半。

TPU v4芯片托盤

谷歌TPU之所以能夠做到效率提高是在于：它可將看似相互獨立的數百塊芯片轉為密切互聯的單個系統來使用。Sundar Pichai談到："每塊芯片的互連帶寬是其他網絡技術的10倍"。并透露會在年底對開發者開放使用。

另外，TPU v4在提高效率的同時，其數據中心也將以90%（或接近）的無碳能源運行。

AI“問診”：針對皮膚病的診斷新功能

本次谷歌 I/O大會的另一個亮點便是AI“問診”。這是一個由AI驅動的皮膚病學輔助工具的預覽，能夠幫助人們了解自身皮膚、頭發和指甲等有關的問題。并使用很多與CT掃描相同的技術來檢測一些眼部疾病或肺癌。可通過手機的攝像頭來識別皮膚病，如手臂上的皮疹。

其具體工作原理是基于Web應用程序，通過上傳拍攝的圖片，利用AI模型來分析圖片中所出現的癥狀信息，從而為用戶提供與之匹配的條件列表。對于條件列表中的每個匹配條件，都源自于皮膚科醫生審核過的信息和常見問題的答案，以及來自網絡中的類似匹配圖像。然而，值得注意的是該應用程序所得出的匹配結果并不能作為診斷依據，也不能替代醫學建議，因為許多情況還是需要在醫院中進行專業的檢查。因此，該應用的意義在于希望用戶在此訪問到權威信息，為下一步做出更為明智的決定。

該款應用工具已經過3年的機器學習研究和產品開發，并發表了多篇同行評審的論文，以驗證其AI模型。除此之外，谷歌的深度學習方法對皮膚病的評估還曾發表于《自然醫學》雜志中，并表明其AI系統可以達到與美國董事會認證的皮膚科醫生相同的準確性。目前，為該款應用程序所提供的AI模型已成功通過了臨床認證，其應用程序在歐盟也獲得了CE標記為I類醫療設備。

編輯：Teresa Li

參考：

https://blog.google/technology/developers/io21-helpful-google/

https://blog.google/technology/research/project-starline/

https://blog.google/technology/health/ai-dermatology-preview-io-2021/

講師招募?LiveVideoStackCon 2021 北京站

LiveVideoStackCon 2021 北京站（9月3-4日）正在面向社會公開招募講師，歡迎通過?speaker@livevideostack.com?提交個人及議題資料，無論你的公司大小，title高低，老鳥還是菜鳥，只要你的內容對技術人有幫助，其他都是次要的，我們將會在24小時內給予反饋。

總結

以上是生活随笔為你收集整理的谷歌 I/O 2021 在音视频领域中有哪些技术值得被关注？的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。