音视频技术开发周刊 | 158
每周一期,縱覽音視頻技術(shù)領(lǐng)域的干貨。
新聞投稿:contribute@livevideostack.com。
內(nèi)容推薦
京東智聯(lián)云分布式低延時(shí)RTC系統(tǒng)
本文由京東智聯(lián)云的魏偉在LiveVideoStackCon2020線上峰會(huì)的演講內(nèi)容整理而成,他會(huì)從邏輯結(jié)構(gòu)、系統(tǒng)業(yè)務(wù)流程和弱網(wǎng)增強(qiáng)等方面介紹京東智聯(lián)云在RTC方面所做的工作。
https://mp.weixin.qq.com/s/75Ccf0tndxMTjIxkX-P-og
Janus網(wǎng)關(guān)的集成與優(yōu)化
本文由學(xué)霸君音視頻架構(gòu)師李橋平在LiveVideoStackCon 2020 線上峰會(huì)的演講內(nèi)容整理而成,內(nèi)容主要包括Janus網(wǎng)關(guān)的集成過程以及集成過程中遇到的一些問題。
https://mp.weixin.qq.com/s/D1ZruKHYuJ7hSIzZksAPPA
淘寶直播窄帶高清技術(shù)
本文來自阿里巴巴淘系技術(shù)部 高級(jí)算法專家王立波在LiveVideoStackCon 2020線上峰會(huì)的分享,從直播背景、直播痛點(diǎn)分析、窄帶高清、云視頻技術(shù)趨勢幾方面詳細(xì)介紹了如何在確保用戶體驗(yàn)QOS不變的前提下,實(shí)現(xiàn)淘寶直播的技術(shù)架構(gòu)升級(jí)和成本大幅縮減。
https://mp.weixin.qq.com/s/goVRIi4OE0kjLaB5GnsqcQ
架構(gòu)
基于 WebRTC 開發(fā) Android Messenger:第3部分
請(qǐng)首先閱讀第 1 + 2 部分(并歡迎您參加網(wǎng)絡(luò)研討會(huì))
https://googleprojectzero.blogspot.com/2020/08/exploiting-android-messengers-part-3.html
三個(gè)月時(shí)間,需求量增長30倍:在 COVID-19 疫情期間Google Meet如何做到高速增長
隨著COVID-19將我們的世界變成一個(gè)距離更遠(yuǎn)的世界,許多人開始尋求在線視頻會(huì)議來保持社交,教育和工作場所的聯(lián)系,這種轉(zhuǎn)變吸引了更多的用戶使用Google Meet。
https://cloud.google.com/blog/products/g-suite/keeping-google-meet-ahead-of-usage-demand-during-covid-19
WebRTC 產(chǎn)品中第一個(gè) HEVC(H.265)支持和 v2.1 中的改進(jìn)
Ant Media 在其 WebRTC streaming 功能中增加了 HEVC 支持。
https://antmedia.io/the-first-hevc-h265-support-in-webrtc/
傳輸網(wǎng)絡(luò)
通過IP傳輸音頻元數(shù)據(jù)
這是AIMS和VSF帶來的一期夏季會(huì)議,會(huì)議主講人是Kent Terry,他是杜比實(shí)驗(yàn)室聲音技術(shù)的高級(jí)經(jīng)理,他將與我們討論IP音頻及元數(shù)據(jù)的內(nèi)容。
https://mp.weixin.qq.com/s/ZJLOOGVLtxFipMFqtZzsrg
HESP及其聯(lián)盟的介紹
HESP聯(lián)盟將流媒體視頻供應(yīng)商和媒體公司聚集在一起,通過標(biāo)準(zhǔn)化和推進(jìn)HESP(High Efficiency Streaming Protocol 高效流媒體協(xié)議)和HESP市場化解決方案,以更低的成本提供卓越的在線視頻質(zhì)量體驗(yàn)。
https://mp.weixin.qq.com/s/JEslKft4zKMfXU72hBcriA
表白失敗后,我明白了TCP實(shí)現(xiàn)原理
面向連接、可靠、基于字節(jié)流、傳輸層、協(xié)議、端到端,理解了這些關(guān)鍵字也就理解了 TCP 的實(shí)現(xiàn)原理,本文將從這些關(guān)鍵字開始進(jìn)行分析。
https://mp.weixin.qq.com/s/0zU_Qc1zMXdy-RQzKUBdkw
編解碼
從編解碼、傳輸?shù)交A(chǔ)架構(gòu) 詳解Bigo多媒體技術(shù)棧
本文來自Bigo多媒體技術(shù)團(tuán)隊(duì)的投稿,詳細(xì)介紹了Bigo多媒體技術(shù)的前生今世,通過何種技術(shù)手段支撐起了BigoLive、Likee和imo三大業(yè)務(wù)。技術(shù)棧具體涉及編解碼、傳輸、全球基礎(chǔ)設(shè)施架構(gòu)等三方面。如果你也有獨(dú)到的經(jīng)驗(yàn)與思考,歡迎通過contribute@livevideostack.com投稿給我們。
https://mp.weixin.qq.com/s/INALBMInYD18AFtCDZCPjQ
LCEVC繞開編解碼器戰(zhàn)爭的9個(gè)原因
對(duì)于希望通過4K UHD和其他新興的高比特率視頻格式來解決帶寬和延遲挑戰(zhàn)的人們,而不必解決下一代編解碼器帶來的所有問題,這是一個(gè)好消息:看來您的愿望已經(jīng)成真。今年年初,運(yùn)動(dòng)圖像專家組(MPEG)朝著最終批準(zhǔn)MPEG-5第1部分和第2部分邁出了重要一步,分別稱為基本視頻編碼(EVC)和低復(fù)雜度增強(qiáng)視頻編碼(LCEVC),以及H.266,也稱為多功能視頻編碼(VVC)。
https://www.red5pro.com/blog/9-reasons-why-lcevc-circumvents-the-codec-wars/
音視頻技術(shù)
視頻碼控:CBR、VBR和ABR
本文介紹下常見視頻編碼器碼率控制方案,具體的編碼器可能在實(shí)現(xiàn)和使用上有所差異,具體在調(diào)用API和閱讀源碼時(shí)需要進(jìn)行進(jìn)一步分析和了解。
https://mp.weixin.qq.com/s/6VPT_35BNPMAwFSs8KsJdQ
Dropbox評(píng)估了CUBIC,BBR和BBR v2三種擁塞控制算法
在本文中,我們研究了在Dropbox Edge Network上收集的實(shí)驗(yàn)數(shù)據(jù)。我們將BBRv2與BBRv1和CUBIC進(jìn)行了比較,表明BBRv2是對(duì)它們兩者的絕對(duì)改進(jìn)。我們還顯示BBRv2實(shí)驗(yàn)結(jié)果與其理論設(shè)計(jì)原理相符。
https://arxiv.org/abs/2008.07699
視頻質(zhì)量評(píng)估
無參考評(píng)估在云信的視頻測試實(shí)踐
在實(shí)時(shí)音視頻領(lǐng)域,如何實(shí)現(xiàn)視頻的全自動(dòng)化評(píng)估是一個(gè)業(yè)界共同的難題。無參考(NR)技術(shù)不需要關(guān)于參考視頻的任何信息,無疑是視頻全自動(dòng)化評(píng)估的曙光。本篇文章將介紹云信測試組最近在使用的一種視頻無參考評(píng)估方法,及其自動(dòng)化應(yīng)用方案。
https://mp.weixin.qq.com/s/eaAGxhvP9FAczwzwMP1vgw
AI智能
使用MediaPipe BlazePose進(jìn)行設(shè)備上實(shí)時(shí)身體姿勢跟蹤
視頻姿勢估計(jì)起著至關(guān)重要的作用,可以在增強(qiáng)現(xiàn)實(shí),手語識(shí)別,全身手勢控制甚至量化體育鍛煉中將數(shù)字內(nèi)容和信息疊加在物理世界的頂部,從而構(gòu)成瑜伽的基礎(chǔ),舞蹈和健身應(yīng)用。由于各種可能的姿勢(例如,數(shù)百個(gè)瑜伽體式),許多自由度,閉塞(例如,身體或其他物體遮擋從攝像機(jī)看到的四肢),用于健身應(yīng)用的姿勢估計(jì)尤其具有挑戰(zhàn)性外觀或服裝。
https://ai.googleblog.com/2020/08/on-device-real-time-body-pose-tracking.html
圖像
谷歌新研究:用2D網(wǎng)圖就能合成3D地圖模型
通常根據(jù)真實(shí)場景重建精準(zhǔn)逼真的3D地圖模型并不容易,谷歌科研人員為了簡化這一流程,訓(xùn)練了一個(gè)基于NeRF(神經(jīng)輻射場)的學(xué)習(xí)算法,可通過同一場景的幾張網(wǎng)絡(luò)照片合成多個(gè)視角,實(shí)現(xiàn)3D效果。
https://mp.weixin.qq.com/s/ImLW2XXu7Sav3f1D_mV5qg
資源推薦
前端音視頻的那些名詞(入門)
適合音視頻初學(xué)者收藏。
https://juejin.im/post/6861941219938418702
資訊速覽
Android“ Nearby Share” 文件共享功能上線?
Scener 與 Agora 合作,見證了100倍增長的 Watch Party 平臺(tái)
AVCtechnologies 宣布達(dá)成收購 Ribbon 的 Kandy Communications 業(yè)務(wù)的協(xié)議
活動(dòng)推薦
【線上分享】互動(dòng)協(xié)作白板與音視頻實(shí)時(shí)同步技術(shù)實(shí)踐
在線教育行業(yè)中白板技術(shù)占據(jù)了不可或缺的位置,逐漸成為各大教學(xué)場景的標(biāo)配功能。但由于網(wǎng)絡(luò)環(huán)境參差不齊、教學(xué)手段各有特色,如何實(shí)現(xiàn)白板實(shí)時(shí)協(xié)作、攻破白板與音視頻不同步成為關(guān)鍵。8月27日19:30-20:30,即構(gòu)科技互動(dòng)白板技術(shù)負(fù)責(zé)人陳曉聰將通過對(duì)齊音視頻流與白板信令以及沖突判定算法實(shí)現(xiàn)音畫同步和百人實(shí)時(shí)互動(dòng)協(xié)作。
訪問下方鏈接或點(diǎn)擊【閱讀原文】預(yù)約直播:
http://livevideostack.mikecrm.com/DaOkXQf
總結(jié)
以上是生活随笔為你收集整理的音视频技术开发周刊 | 158的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Telltale:看Netflix如何简
- 下一篇: 【线上分享】互动协作白板与音视频实时同步