目前短視頻 、互動直播等音視頻應用火爆，抖音，快手等已經成為當紅流量入口，音視頻技術有了長足的發展。隨著社交的流行、玩法的增加，IM功能也成為眾多App中必備功能之一。2019年伴隨著5G、AI熱度持續升高即時通訊和音視頻技術將會有哪些發展？

好奇心，構建音視頻算法核心；經驗漏斗，筑造 IM 底層架構。10月26日，網易 MCtalk技術沙龍——“5G萬物智聯下的互聯網通信技術”，邀請到網易云信、Bilibili、微幀科技、東方新聞研發負責人，一同分享關于 IM 與音視頻技術的經驗值與好奇心，共同探討 5G 萬物智聯下的互聯網通信云技術。

網易云信

基于IM即時通信的Flutter開發實踐

Flutter從誕生到現在，已經成為了跨端開發的領跑者。其開發應用的流暢體驗、開發效率之高，并且支持多種開發工具的插件化使用等優點受到了大量開發者的關注，國內外越來越多的公司走上了Flutter探索之路。但目前Flutter的生態還不算很好，很多必備的功能并不完善，例如原生播放器功能較少，沒有即時通訊功能框架等等。所以，網易云信為開發者提供了基于Flutter平臺的IM與音視頻解決方案。

在社交如此流行的今天，IM成為很多APP中必備功能之一，正因如此網易云信資深開發工程師孫有軍在技術沙龍上針對在Flutter封裝相關的知識做了全面分享，詳述了在基于云信Android SDK以及iOS SDK進行Flutter SDK封裝過程， 闡述了封裝過程中的各種注意事項，提出了各種結合項目的最佳實踐，同時還分享了在封裝過程中需要注意的點，并且對封裝后的SDK進行了產品開發驗證， 構建了一個新的跨平臺視頻應用， 同時分享了在做產品過程遇到的“坑”和解決辦法，尤其是針對當前平臺對iOS支持不如Android情況下，iOS遇到的特有問題進行了分享。

Bilibili

視頻質量主觀對比分析實踐

國慶前夕，4K新版《開國大典》在各大視頻網站大火，老電影翻新技術讓歷史經典清晰重現。隨著視頻技術的發展，視頻編碼工作也越來越精細化，老電影翻新，超分辨率等技術的流行，無不對轉碼質量有著更高的要求。那要如何做好轉碼工作？視頻質量如何評估？作為中國覆蓋范圍最廣、知名度最高的視頻彈幕動漫平臺，Bilibili進行了哪些實踐，又得到了什么經驗？

Bilibili資深技術工程師青石在沙龍現場和我們分享了視頻質量主觀對比分析實踐，并詳細介紹了B站如何優化視頻轉碼工作。青石介紹道，視頻轉碼的優化首先需要有一個明確的質量評價體系目前業內通用的有PSN、SSIM、VMAF等。但是有時這些全參考系的評價標準并不特別合適。轉碼效果最終是要面向用戶的，我們以播放器的形式在同一個窗口同時播放轉碼前后的兩個視頻，播放時可以任意分配兩個視頻的顯示比例，利用人眼的視覺暫留特性，可以非常方便的對比分析兩個視頻的質量差異。

網易云信

超高清 4K 視頻低延時直播與 RTC 融合架構設計

4G 帶來了音視頻 APP 的爆發，各路音視頻業務為主的公司百花齊放，音視頻技術無論在廣度還是深度上都蓬勃發展，迎來了質的飛躍。而5G 高帶寬，低延遲的特性，更是為音視頻技術帶來無限可能。

網易云信多媒體資深技術架構師吳桐在技術沙龍上分享了超高清4K視頻低延時直播與RTC融合架構設計實踐，從5G與未來網絡格局、超高清編碼到直播與RTC融合架構的設計的相關知識進行了全面分享。

關于低延時的直播與RTC融合架構吳桐談到主要分成兩部分，一個是低延時，從傳輸維度來說低延時有幾點決定因素，包括傳輸協議的選擇，擁塞控制算法的選擇，服務器分發網絡怎么做，包括第一公里的解決方案等。另外還有發送端的采集編碼、前處理延時，接收端Jitterbuffer處理延時，解碼播放延時等。

第二是直播與RTC融合架構，網易云信對外服務NRTC是一個工業級功能完整的音視頻融合服務框架。NRTC支持采用網易云信自研的UDP低延時協議實現實時音視頻與低延時直播，也支持使用基于標準RTMP協議的直播推拉流，同時將上述兩者結合對外提供旁路直播方案。NRTC還對外提供直播與點播的融合CDN分發能力，通過融合CDN提高了分發網絡的容量的同時保證了更高的系統魯棒性。在支持客戶端類別的方面，NRTC及支持傳統的iOS、Android與Windows PC端的接入，還通過各類網關支持了標準WebRTC、微信小程序音視頻的接入。綜上，NRTC對外提供的能力十分全面，相關的功能也非常成熟穩定，NRTC在線上支撐了網易內外部各客戶的海量應用。

在分享的最后吳桐還對AI、VR、IoT與5G邊緣計算等前沿技術在音視頻領域的應用做了相關的總結與展望。

微幀科技

實時視頻通信中的AV1優化

視頻的實時通信對編碼器的編碼性能、編碼速度以及時延均有嚴格要求。AV1為新一代視頻編碼標準，由開放媒體聯盟多家會員聯合打造，于2018年6月封稿。相比已有編碼標準，AV1增添了70+個編碼工具，顯著提升了編碼效率。由于編碼標準本身的復雜度，AV1編碼器的設計，尤其在實時視頻通信中的應用實踐，面臨挑戰。與此同時，深度學習在視頻編碼，尤其針對AV1編碼優化，相比深度學習在圖像編碼中的探索，任重道遠但具備持續優化的潛力。

MCtalk技術沙龍中，微幀科技Zoe詳細介紹了機器學習在視頻編碼中的實踐與運用，做一些初淺的探索。與此同時，微幀科技在AV1編碼器優化中的初始結果，給出比對小結，性能指標包括編碼效率（BD-Rate），編碼速度，以及碼控等，主要相比目前的主流編碼器x264，x265，以及目前AV1主流開源編碼器libaom/SVT-AV1，給出針對視頻實時場景的比較結果，并跟與會者分享了AV1編碼器優化的基本思路與框架。

東方新聞

直播平臺建立監控體系實踐

隨著5G技術的來臨，在線直播行業發展持續加速，據艾媒咨詢數據顯示，2017年在線直播用戶規模達到3.98億人，2018年在線直播用戶規模達到4.56億人，并預計2019年將突破5億人。在線直播行業發展繼續加速，直播行業將持續迎來洗牌熱潮。業務的發展帶來需求的升級，并為直播技術帶來新的課題。5G+AI在直播行業如何應用？如何設計和實現更完善的直播監控體系？如何實現通過數據去驅動業務發展？

在MCtalk技術沙龍上，東方新聞技術總監曾小偉，從直播平臺發展趨勢說起，詳細介紹了直播平臺的架構分析以及直播平臺監控體系的設計，并分享了如何通過監控平臺的數據分析來協助業務發展。他提到，監控平臺的數據分析是幫助業務方把業務漏斗做的更好。要明確業務方的核心需求，監控數據以合理的展現形式，提供給業務方所需的數據樣本，來幫助市場更好的投放，主播提高留存，產品優化缺陷活動提高流水。

5G不僅僅推動技術變革，更是為音視頻行業帶來新的機遇，更多場景的應用亟待發掘。網易云信憑借19年IM及音視頻技術累積，一直走在行業及技術的前沿，不斷摸索、創新，致力于幫助客戶提升效率，降低成本，不錯過5G帶來的任何一個新風口。

點擊【閱讀原文】，立即獲取完整版分享資料。

與50位技術專家面對面20年技術見證，附贈技術全景圖

總結

以上是生活随笔為你收集整理的技术玩法大升级，网易MCtalk揭秘5G即时通讯技术背后的秘密的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。