音视频技术开发周刊 | 140
每周一期,縱覽音視頻技術(shù)領(lǐng)域的干貨和新聞投稿:contribute@livevideostack.com。
架構(gòu)
?
為什么您的視頻會(huì)議系統(tǒng)不互相集成
主要是因?yàn)楫?dāng)大多數(shù)公司希望成為 SaaS 或者云供應(yīng)商時(shí),以至于沒(méi)有動(dòng)力去實(shí)現(xiàn)。
https://www.theverge.com/2020/4/1/21202945/zoom-alternative-conference-video-free-app-skype-slack-hangouts-jitsi
?
到目前為止,Zoom 安全和隱私缺陷和問(wèn)題,以及您可以采取哪些措施保護(hù)自己
即使在這種情況下,可以確信所有視頻會(huì)議供應(yīng)商都希望 Zoom 的股價(jià)不要跌的太多。
https://tidbits.com/2020/04/03/every-zoom-security-and-privacy-flaw-so-far-and-what-you-can-do-to-protect-yourself/
?
如何在 Ubuntu 18.04 中使用 coturn 并創(chuàng)建和配置 STUN/TURN服務(wù)器
強(qiáng)力推薦閱讀一下。
https://ourcodeworld.com/articles/read/1175/how-to-create-and-configure-your-own-stun-turn-server-with-coturn-in-ubuntu-18-04
?
您的視頻通話(huà)是否具有端到端加密?可能不會(huì)
SFU 端到端的加密以及 WebRTC 中的位置。
https://webrtchacks.com/you-dont-have-end-to-end-encryption-e2ee/
活動(dòng)推薦
【線(xiàn)上分享】如何搭建低延時(shí)、交互式的在線(xiàn)教育平臺(tái)?
伴隨學(xué)校“停課不停學(xué)”,在線(xiàn)教育迎來(lái)了新的一輪快速增長(zhǎng)。如何破局線(xiàn)上,搭建低延時(shí)、交互式在線(xiàn)教育平臺(tái),還原線(xiàn)下教學(xué)體驗(yàn)?4月19日(周日)晚19:30,我們邀請(qǐng)到騰訊互動(dòng)課堂技術(shù)負(fù)責(zé)人繆少豪詳細(xì)介紹騰訊云在線(xiàn)教育互動(dòng)課堂方案的設(shè)計(jì)與技術(shù)挑戰(zhàn),重點(diǎn)剖析互動(dòng)白板實(shí)現(xiàn)的技術(shù)難點(diǎn)與突破。
掃描下圖二維碼立即報(bào)名
【開(kāi)發(fā)福利】TRTC-實(shí)時(shí)音視頻互動(dòng)場(chǎng)景開(kāi)發(fā)挑戰(zhàn)賽,贏取豐厚福利
伴隨直播、遠(yuǎn)程辦公、網(wǎng)絡(luò)教學(xué)需求的不斷提升,實(shí)時(shí)音視頻技術(shù)被廣泛應(yīng)用,如何保證產(chǎn)品的高并發(fā)、高可用、高性能也成為關(guān)鍵課題。騰訊實(shí)時(shí)音視頻(TRTC)以多人音視頻通話(huà)和低延時(shí)互動(dòng)直播兩大場(chǎng)景化方案,為開(kāi)發(fā)者提供可快速搭建的低成本、低延時(shí)、高品質(zhì)的互動(dòng)課堂解決方案。
4月13日,騰訊云啟動(dòng)TRTC SDK開(kāi)發(fā)應(yīng)用大賽,將這些能力開(kāi)放出來(lái),并提供免費(fèi)資源給合作伙伴進(jìn)行實(shí)時(shí)應(yīng)用場(chǎng)景的開(kāi)發(fā),更有超多開(kāi)發(fā)福利等著你。
【訪(fǎng)問(wèn)鏈接立即報(bào)名】
https://cloud.tencent.com/act/event/TRTC-SDK-Competition
傳輸網(wǎng)絡(luò)
Electron 低延遲視頻流播放方案探索
這篇文章也跟我們正在開(kāi)發(fā)的 Electron 客戶(hù)端有一定關(guān)系。最近我們正在預(yù)研在 Electron 頁(yè)面中實(shí)時(shí)播放會(huì)議視頻流的方案。
https://juejin.im/post/5e8e714f6fb9a03c832b089c
使用 Matrix 和 Jitsi 運(yùn)行自己的安全通信服務(wù)
如何向 Matrix 添加視頻。
https://matrix.org/blog/2020/04/06/running-your-own-secure-communication-service-with-matrix-and-jitsi
編解碼
基于云的編碼如何提高視頻流質(zhì)量
演講者介紹了不同分辨率下的各種編解碼器(即AVC、HEVC、AV1和VVC),并比較它們的編碼復(fù)雜性。此外,還介紹了基于本地服務(wù)器的實(shí)時(shí)編碼的局限性,并介紹了如何采用云計(jì)算的方式解決這些問(wèn)題。演講還詳細(xì)探討了基于云計(jì)算編碼的各種優(yōu)勢(shì),包括運(yùn)營(yíng)商如何通過(guò)云計(jì)算更彈性地提供服務(wù),即能快速開(kāi)啟和關(guān)閉服務(wù),且能在遇到僅持續(xù)幾天的大型體育賽事或新聞報(bào)道時(shí)能擴(kuò)容。
https://mp.weixin.qq.com/s/wfFasbT3H462hMD-Kwbx7A
H265 / HEVC,硬件加速,在 #Webrtc 完成的差不多
我想知道這項(xiàng)投入對(duì)蘋(píng)果或英特爾的長(zhǎng)期優(yōu)勢(shì)是什么?
http://webrtcbydralex.com/index.php/2020/04/03/h265-hevc-hardware-accelerated-in-webrtc-done-well-almost/
速度失真優(yōu)化:開(kāi)源HEVC編碼的權(quán)衡
演講主要目的是展示如何優(yōu)化在本地或公共云中的商品硬件上運(yùn)行的開(kāi)源分布式編碼系統(tǒng)的吞吐量。這將使用流行的開(kāi)源x265視頻編碼器完成。它在商業(yè)云編碼實(shí)現(xiàn)中無(wú)處不在,通常與ffmpeg結(jié)合使用。它是一種通用的編碼器,它允許用戶(hù)以非常精細(xì)的粒度控制各個(gè)方面,例如使用HEVC編碼工具,速率失真優(yōu)化(RDO),感知質(zhì)量,指令集擴(kuò)展和并發(fā)性。它還通過(guò)其日志記錄系統(tǒng)輸出大量?jī)?nèi)部信息。這種詳細(xì)程度與源代碼的可用性相結(jié)合,使我們能夠在質(zhì)量和代碼路徑級(jí)別上進(jìn)行詳細(xì)的權(quán)衡分析。
https://mp.weixin.qq.com/s/pKKhl0CMt29NbG2_i3dl0g
MPEG-5 EVC
演講開(kāi)始時(shí)Jonatan介紹了視頻編碼的背景,視頻消費(fèi)在全球范圍內(nèi)不斷增加,改進(jìn)的壓縮效果可降低成本并提高質(zhì)量,而從2003年開(kāi)始,當(dāng)今大多數(shù)視頻服務(wù)都使用AVC / H.264,但是是否存在更好的替代品呢?
https://mp.weixin.qq.com/s/lAWHrPKDHdQrj6WApRL9lw
視頻技術(shù)
我們必須將神經(jīng)網(wǎng)絡(luò)壓縮 30倍 才能在 Chrome 中運(yùn)行
充分利用 WebAssembly 來(lái)提高瀏覽器中 WebRTC 的音頻質(zhì)量。
https://krisp.ai/blog/how-we-shrunk-dnn-to-run-inside-chrome/
新的 RingCentral 視頻會(huì)議解決方案使接入速度更快,協(xié)作更輕松
RingCentral 用他們自己的基于 WebRTC 實(shí)現(xiàn)的視頻會(huì)議服務(wù)代替 Zoom。
https://www.ringcentral.com/blog/new-ringcentral-video-meetings-solution-makes-it-faster-to-join-easier-to-collaborate/
AI智能
使用 WaveNetEQ AI 提高 Duo 應(yīng)用中的音頻質(zhì)量 (Google AI Blog)
Google 使用機(jī)器學(xué)習(xí)實(shí)現(xiàn)丟包隱藏。這不是 WebRTC 的事情,而是標(biāo)志著公司需要投入資源的方向。
https://ai.googleblog.com/2020/04/improving-audio-quality-in-duo-with.html
圖像
借助 Intel OWT 加速 WebRTC 媒體服務(wù)器中的計(jì)算機(jī)視覺(jué)
Intel OWT + OpenCV + GStreamer
https://webrtchacks.com/accelerated-computer-vision-inside-a-webrtc-media-server-with-intel-owt/
avatarify
avatarify 項(xiàng)目也是一位國(guó)外開(kāi)發(fā)者發(fā)布在 GitHub 上的開(kāi)源項(xiàng)目,可以為 Zoom、Skype 這類(lèi)視頻通話(huà)應(yīng)用添加自己的替身,項(xiàng)目中使用的核心模型 first order model 來(lái)源于一篇 NIPS 論文《First Order Motion Model for Image Animation》。
https://github.com/alievk/avatarify
資源推薦
基于Netty實(shí)現(xiàn)服務(wù)端與客戶(hù)端通信
本文介紹基于Netty實(shí)現(xiàn)的服務(wù)端與客戶(hù)端通信的簡(jiǎn)單使用方法,并在此基礎(chǔ)上實(shí)現(xiàn)一個(gè)簡(jiǎn)單的服務(wù)端-客戶(hù)端指令通信的Demo。
http://www.milovetingting.cn/2020/04/12/Android/%E5%9F%BA%E4%BA%8ENetty%E5%AE%9E%E7%8E%B0%E6%9C%8D%E5%8A%A1%E5%99%A8%E4%B8%8E%E5%AE%A2%E6%88%B7%E7%AB%AF%E9%80%9A%E4%BF%A1/
點(diǎn)擊“閱讀原文”可查看更多詳細(xì)信息,請(qǐng)大家科學(xué)上網(wǎng)。
總結(jié)
以上是生活随笔為你收集整理的音视频技术开发周刊 | 140的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: TRTC助力高并发、高可用实时音视频互动
- 下一篇: 专访腾讯多媒体实验室商世东:咬咬牙也要跟