『音視頻技術開發周刊』由LiveVideoStack團隊出品，專注在音視頻技術領域，縱覽相關技術領域的干貨和新聞投稿，每周一期。點擊『閱讀原文』，瀏覽第87期內容，祝您閱讀愉快。

架構

如何優化WebRTC提升直播體驗？

全民快樂資深音視頻工程師郭奕在LiveVideoStackCon 2018音視頻技術大會的演講中從工程師的角度講述了如何利用WebRTC打造出具備實時互動能力的應用，包括從信令的交互到媒體的傳輸需要完成的工作。LiveVideoStack對演講內容進行了整理。

微博客戶端播放器的演進之路

近年來新浪微博圍繞著快速上線、快速啟播、成本節約、穩定性等問題對客戶端播放器進行了一系列優化，以求為用戶提供更好的服務體驗。本文來自新浪微博高級多媒體工程師劉文在LiveVideoStackCon 2018音視頻技術大會中的演講，并由LiveVideoStack整理而成。

未來全球79％流量走向移動視頻 大屏、超高清需求促使OTT TV用戶增長

全球視頻消費在持續增長中，思科（Cisco）近期的數據顯示至2022年視頻將占全球移動數據流量的79％，視頻使用往往發生在晚上黃金時間段，全球的IP流量排名中：亞太地區位居首位，北美、西歐緊隨其后。互聯網電視端，可將在回歸大屏的趨勢下，借助于VR/AR及超高清的支持下獲得更多的用戶流量。

聊聊 WebRTC

Web Real-Time Communication（Web實時通信，WebRTC）由一組標準、協議和JavaScript API組成，用于實現瀏覽器之間（端到端）的音頻、視頻及數據共享。WebRTC使得實時通信變成一種標準功能，任何Web應用都無需借助第三方插件和專有軟件，而是通過簡單地JavaScript API即可完成。

傳輸網絡

QUIC協議綜述

QUIC協議是一個加密的、多路復用的、低延時的傳輸協議，它被設計用于提高HTTPS的傳輸效率進而使得快速部署和持續進化成為可能。?

SRT協議解析

SRT（Secure Reliable Transport）是一種能夠在復雜網絡環境下實時、準確地傳輸數據流的網絡傳輸技術，它在傳輸層使用UDP協議，雖然UDP協議是一種不可靠傳輸協議，但是憑借SRT強大的數據恢復能力，再加上UDP協議自身速度快、開銷低的特點，最終實現了SRT安全、穩定、快速的傳輸效果。

基于UDP實現Android和PC端的雙向通信

首先我們先來簡單了解一下UDP協議。它和TCP協議都是網絡通信中非常重要的傳輸協議。不同于TCP協議的端到端服務，它是面向非連接的，屬不可靠協議。

音頻/視頻技術

直播多人連麥技術簡介

隨著直播行業的發展，平臺玩法越來越多，其中秀場連麥直播玩法人氣較高，一方面改變了主播與觀眾對立的體驗，另一方面拉近了主播與觀眾的距離，對于拉動主播收入平臺營收起到了十分重要的作用。本篇文章將分享直播移動端直播連麥的技術實現架構。

WebRTC 的回聲抵消(AEC、AECM)算法簡介

WebRTC的回聲抵消(AEC、AECM)算法主要包括以下幾個重要模塊：1.回聲時延估計 2.NLMS(歸一化最小均方自適應算法) 3.NLP（非線性濾波） 4.CNG(舒適噪聲產生）。本文重點介紹WebRTC的回聲時延估計算法,這也是WebRTC回聲抵消算法區別一般算法(如視頻會議中的算法)比較有特色的地方。

一看就能學會的H5視頻推流方案

隨著直播平臺爆發式增長，直播平臺從 PC 端轉戰移動端，緊跟著直播的潮流，自己學習實現了一套簡單的 H5 視頻推流的解決方案，下面就給小伙伴們分享一下自己學習過程中的經驗。

直播過程卡頓時，切換碼率與選擇性丟幀的處理策略研究

由于直播推送端會存在于各種不同的網絡環境下面：有線、無線、3G、4G、衛星信號等等，在這些網絡條件下，如何做到直播流暢不卡頓，我們這個時候就需要引入可變碼率和丟幀兩種策略，保證推送的實時和數據的有效。

編解碼

H264幀格式解析

本文將關于H264與流媒體的知識進行了總結，對音視頻領域內的知識進行梳理。

MediaCodec 編碼后的數據使用 FFmpeg 進行封裝

由于使用 MediaMuxer 進行文件封裝不支持邊轉碼邊分塊，所以選擇通過使用 FFmpeg muxer 進行文件封裝, 在封裝過程中完成文件的分塊。

AAC 音頻編碼技術

AAC是高級音頻編碼（Advanced Audio Coding）的縮寫，出現于1997年，最初是基于MPEG-2的音頻編碼技術，目的是取代MP3格式。2000年，MPEG-4標準出臺，AAC重新集成了其它技術（PS,SBR），為區別于傳統的MPEG-2 AAC，故含有SBR或PS特性的AAC又稱為MPEG-4 AAC。

基于自動鏡頭分割的H.264視頻壓縮編碼

本文基于互信息量和信息熵原理度量幀特征差異，提出結合統計模型的動態閾值方法將視頻序列預分為多個鏡頭，再進行編碼，鏡頭邊界指定為I幀，鏡頭內部分配為P幀或B幀，并對閃光燈和視頻亮度突變情況下的分鏡頭算法做出探討。

AI智能

愛奇藝短視頻軟色情識別技術解析

隨著UGC內容爆發式增長，信息流產品占領越來越多的用戶時間。愛奇藝作為國內領先的互聯網視頻媒體，承擔了正確引導用戶價值觀的社會責任。所以識別和屏蔽低俗內容、做好風險內容控制、凈化短視頻生態是一項非常值得重視的工作。下面我們從技術的角度，以“軟色情識別”為例，介紹愛奇藝的多模態低俗內容識別技術。

視頻內容理解在Hulu的應用與實踐

Hulu 自 2016 年開始系統性地在視頻內容理解方面展開研究，從視頻切分、人工合成元素抽取、視頻標簽生成、精彩片段分析等等課題入手，通過構建 AI 系統平臺來支撐視頻數據的生成和處理，在對業務及產品的支持方面也多有探索，從中也積累了一些經驗。

超十億樣本煉就的CNN助力圖像質量增強，Adobe推出新功能「增強細節」

近日，Adobe 宣布推出一項名為 Enhance Details（增強細節）的照片編輯應用程序新功能，該功能使用機器學習來增強圖像的分辨率和圖像質量。新功能將在 Lightroom CC 中提供，Adobe 稱該功能可以將某些圖像的分辨率提高多達 30％。

視頻監控系統中的運動檢測及報警

在模擬視頻監控中，報警措施通常是通過被監控現場的人工干預來實現的；在數字視頻監控系統中，圖像序列的運動檢測及報警不僅可以自行替代監視人員的部分工作，提高監視系統的自動化水平，而且也可提高監控存儲的效率。

圖像

UHD HDR現狀

本技術指南旨在描述超高清HDR的現狀以及不同HDR技術的特點。到目前為止，HLG已經成為實時應用程序的部署領導者。由于電視制造商和移動設備的大力支持，再加上杜比圍繞Dolby Vision開發的完整生態系統，我們預計Dolby Vision將被部署在電視和移動用例的單播中。其他HDR技術，如SL-HDR1和HDR10+，仍在標準化過程中，可能會在未來幾年看到市場對他們興趣的增加。

UHD HDR Resource Kit

本文提供了現有UHD HDR標準的綜述，包括它們的狀態、準備情況、潛力限制和部署狀態。這份技術指南將會提供一個HDR文件實際生產的工作流程，其中包括拍攝，制作，后處理，分級以及播放。

總結

以上是生活随笔為你收集整理的音视频技术开发周刊 87期的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。