每周一期，縱覽音視頻技術領域的干貨。

新聞投稿：contribute@livevideostack.com。

架構

WebRTC 1.0 標準中更新了 Candidate 篩選優先級內容

WebRTC 1.0：瀏覽器之間的實時通信

https://www.w3.org/blog/news/archives/8666

NAT traversal 如何工作的？

在我們的文章中，我們涵蓋了關于Tailscale如何工作的很多內容。然而，我們忽略了如何通過NATs(網絡地址轉換器)直接連接你的設備，不管它們之間有什么障礙。讓我們現在談談這個!

https://tailscale.com/blog/how-nat-traversal-works/

使用WebRTC開發Android Messenger：第1部分

這是一個由三部分組成的系列文章，內容涉及：利用WebRTC中的BUG和利用Messenger應用程序。本系列文章重點闡述了當應用程序不能應用于WebRTC補丁程序以及通信和安全問題通知中斷時可能出問題的方面。

https://googleprojectzero.blogspot.com/2020/08/exploiting-android-messengers-part-1.html

傳輸網絡

徹底弄懂TCP協議：從三次握手說起

說到 TCP 協議，相信大家都比較熟悉了，對于 TCP 協議總能說個一二三來，但是 TCP 協議又是一個非常復雜的協議，其中有不少細節點讓人頭疼點。本文就是來說說這些頭疼點的，淺談一些 TCP 的疑難雜癥。

https://mp.weixin.qq.com/s/6LiZGMt2KRiIoMaLwx-lkQ

基于云的遠程辦公

本文來自SMPTE2020的演講，作者是Grass Valley產品行銷副總裁Boromy Ung。此次演講的主題是：基于云的遠程辦公。

https://mp.weixin.qq.com/s/4hgkFTlTOyNxOOYift75lA

SRT協議概述

本文來自SVA 2020，主講人是來自Haivision的Maxim Sharabayko，他向我們介紹了有關的SRT協議的許多內容。SRT能夠讓有損視頻傳輸網絡的性能表現看起來像無損視頻傳輸，正是這種能力使得其越來越廣為人知，這一點從SRT聯盟的成員公司目前已經超過400個就可以證明。

https://mp.weixin.qq.com/s/xFMYU3YgNh51BPKnmKZdMg

編解碼

FFmpeg 播放器實現音視頻同步的三種方式

播放器對音頻和視頻的播放沒有絕對的靜態的同步，只有相對的動態的同步，實際上音視頻同步就是一個“你追我趕”的過程。

音視頻的同步方式有 3 種，即：音視頻分別向系統時鐘同步、音頻向視頻同步及視頻向音頻同步。

https://mp.weixin.qq.com/s/RRZAAUV8OZ0ksyhFPJnGEw

淺析FFmpeg及SDL視頻流播放存儲技術

本文闡述FFmpeg與SDL的常用函數及各結構體間的關系，并給出視頻流播放存儲的實現過程。在實際應用中，可以根據支持的不同種傳輸協議、 媒體容器格式和音視頻編解碼標準，調整碼率、幀數，實現不同需求的實時視頻流播放存儲，提高在不同情況下的媒體流播放效果。

https://mp.weixin.qq.com/s/ujBwUNHXegREKMehQtCk5g

GeForce RTX 30系列GPU：通過AV1解碼迎來視頻內容的新時代

視頻占世界互聯網流量的60％以上。隨著世界變得更加數字化，尋找有效的視頻傳輸方式比以往任何時候都更為重要。

https://www.nvidia.com/en-us/geforce/news/rtx-30-series-av1-decoding/

人物專訪

當AI成為基礎資源，360OS 發力在線教育的重心——專訪360OS張焰

2020年疫情爆發，在疫情期間幫助行業降本增效，正成為一門大的學問和生意，其中AI在多行業應用中展現了前所未有的能量。360OS AI視覺在線上教育領域的突飛崛起，使得行業將眼光注入到這支AI新生力量中。為此，我們采訪了360OS AI影像事業部研發總監張焰，一起探尋AI在線上教育應用中的中國式突圍。

https://mp.weixin.qq.com/s/fHYcsld3ZgyY_uCk2mxjSw

音視頻技術

RED：通過數據冗余提高音頻質量

WebRTC 中的音頻前向糾錯替代方案。

https://webrtchacks.com/red-improving-audio-quality-with-redundancy/

AI加持的豎屏沉浸播放新體驗

本文由愛奇藝劉小輝在LiveVideoStackCon 2020 線上峰會的演講內容整理而成，內容主要講述通過AI智能的視頻畫面主體識別能力和字幕識別能力，實現在手機端豎屏全屏觀看橫拍視頻的新體驗，給用戶提供沉浸視界新體驗。

https://mp.weixin.qq.com/s/xgfhi-6y8Mh-DTk1Bdn8FQ

At home production

本文來自VIDOVATION的線上會議，參與會議的主要成員有來自MediaKind的Matthew Goldman，VidOvation的Jim Jachetta，VISTA WorldLink的Josh Liemer和Matrox Video的Dan Maloney。在這次會議主要介紹了At home production這一直播新技術。

https://mp.weixin.qq.com/s/yhMbWVYkU-6cgDotdv9kiA

AI智能

亞馬遜團隊在 Interspeech 2020 深度降噪挑戰賽中獲得第一名

什么時候可以 WebAssembly 形式發布出來？

https://www.amazon.science/blog/amazon-team-takes-first-place-in-interspeech-2020-deep-noise-suppression-challenge

深度學習對機器視覺的影響

本文結合了embeded vision 2019中FLIR的演講PPT和威視康電子報中的內容，匯總一下當前深度學習對機器視覺制造的影響。

https://mp.weixin.qq.com/s/nAxbljcLeGWsPK6ITunzTA

Keras vs PyTorch vs Caffe：CNN實現對比

在本文中，我們將構建相同的深度學習框架，即在Keras、PyTorch和Caffe中對同一數據集進行卷積神經網絡圖像分類，并對所有這些方法的實現進行比較。最后，我們將看到PyTorch構建的CNN模型如何優于內置Keras和Caffe的同行。

https://juejin.im/post/6865636168354725895

圖像處理

圖像質量評價：IQA介紹

圖像質量評價(Image quality assessment,IQA)目的在于使用計算模型來衡量圖像質量使結果與主觀質量保持一致（即主觀質量好的圖像其IQA評分也應該越高）。隨著數字圖像和傳輸技術的快速增長，IQA在圖像獲取、傳輸、壓縮、恢復、增強等領域也變得更加重要。

https://mp.weixin.qq.com/s/F9b7qMAX0aKLvdQIKpTVWw

虛擬現實革命前夕：第四次工業革命的鑰匙之一 ——VR&AR深度行業研究報告

VR最大的價值在于，在遙遠的未來可以創造一個虛擬世界；AR最大的價值，作為一種工具改造人類生活的方方面面。

https://mp.weixin.qq.com/s/yUZE79XCWf_3PkNXuZooIA

資訊速覽

• RingByName 宣布免費視頻會議和遠程協作

• Zoom 出品家用智能顯示屏

活動推薦

【線上分享】 Xilinx U30 視頻轉碼 + AI 的應用

9月10日晚19:30，我們邀請到賽靈思數據中心業務拓展經理梁曉明、視頻技術專家曹洪以及Aupera CTO周正寧，帶來Xilinx 新推出的Alveo U30介紹，分享視頻轉碼的難點與瓶頸，并詳細解析賽靈思在視頻轉碼與AI深度結合實踐。

Xilinx U30是一款基于PCIe的小尺寸媒體加速卡，可為實時流媒體視頻服務提供商、OEM廠商以及內容分發網絡（CDN）提供高密度的實時轉碼及視頻實時分析解決方案。

點擊【閱讀原文】或掃碼、訪問鏈接預約報名：

http://livevideostack.mikecrm.com/izFf2o5

總結

以上是生活随笔為你收集整理的音视频技术开发周刊 | 160的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。