除了超分辨率,AI 结合 RTC 还有哪些技术实践?
一說(shuō)到 AI+RTC(Real-time Communication),大家第一個(gè)想起的可能就是超分辨率,它也是 CVPR 中備受關(guān)注的賽題之一。不過(guò),它只是 AI 的應(yīng)用場(chǎng)景之一。
2019 年 10 月 24 日 - 25 日,聲網(wǎng) Agora、極客邦科技、RTC 開(kāi)發(fā)者社區(qū)、CSDN 將在北京聯(lián)合舉辦第五屆 RTC 實(shí)時(shí)互聯(lián)網(wǎng)大會(huì)。本屆大會(huì)邀請(qǐng)到了來(lái)自微軟小冰、搜狗語(yǔ)音交互技術(shù)中心、依圖科技、Hulu、數(shù)美科技等公司的一線技術(shù)、研發(fā)負(fù)責(zé)人,分享與語(yǔ)音交互、智能感知系統(tǒng)、NLP、聲紋識(shí)別、視頻內(nèi)容檢索與推薦、編解碼優(yōu)化等相關(guān)的研究成果與實(shí)踐經(jīng)驗(yàn)。
而且,這場(chǎng)技術(shù)大會(huì)的門票正在限時(shí)免費(fèi)中,點(diǎn)擊「閱讀原文」即可申請(qǐng)!
在這里,我們先劇透一些演講議題:?
Topic:微軟小冰實(shí)時(shí)感官系統(tǒng)與未來(lái)發(fā)展趨勢(shì)
Speaker:劉成城 微軟小冰研發(fā)總監(jiān)
微軟小冰是微軟(亞洲)互聯(lián)網(wǎng)工程院研發(fā)的人工智能機(jī)器人。微軟小冰實(shí)時(shí)感官系統(tǒng)是微軟小冰的線下實(shí)時(shí)交互平臺(tái),她具有多種實(shí)時(shí)識(shí)別和動(dòng)態(tài)捕捉的能力,并可以用戶進(jìn)行實(shí)時(shí)交互。本次演講將會(huì)對(duì)實(shí)時(shí)感官系統(tǒng)全方位深度剖析,并以之為例介紹實(shí)時(shí)感官系統(tǒng)的構(gòu)成與應(yīng)用,引領(lǐng)聽(tīng)眾探索其未來(lái)發(fā)展趨勢(shì)。
Topic:基于內(nèi)容的視頻推薦和實(shí)踐
Speaker:謝曉輝 Hulu首席研發(fā)經(jīng)理
視頻網(wǎng)站面臨的技術(shù)挑戰(zhàn)之一是如何對(duì)視頻做精準(zhǔn)的用戶分發(fā),理解用戶、環(huán)境和視頻內(nèi)容是解決問(wèn)題的核心和關(guān)鍵。以頭部視頻為主的視頻網(wǎng)站由于用戶選擇成本更高、消費(fèi)行為稀疏、復(fù)雜而且感性,因此對(duì)視頻進(jìn)行精確、細(xì)致與豐富的理解和刻畫(huà)顯得更為重要。相比傳統(tǒng)的基于用戶行為的推薦系統(tǒng),如何借助于視頻內(nèi)容理解來(lái)優(yōu)化個(gè)性化推薦和內(nèi)容發(fā)現(xiàn)呢?本次演講內(nèi)容將重點(diǎn)分享Hulu在這一方面的探索和實(shí)踐經(jīng)驗(yàn),內(nèi)容包括視頻理解在內(nèi)容冷啟動(dòng)、視頻精細(xì)化標(biāo)簽和分組、深度推薦模型中的應(yīng)用等等。
Topic:Deep Learning based Super Resolution for mobile RTC
Speaker:周世付 聲網(wǎng)Agora AI 算法工程師
近幾年,超分辨率技術(shù)一直是計(jì)算機(jī)視覺(jué)領(lǐng)域的一個(gè)熱門話題,其應(yīng)用前景廣泛,比如RTC。然后,超分辨率技術(shù)在移動(dòng)端落地的過(guò)程中,面臨著模型過(guò)大、運(yùn)算復(fù)雜、設(shè)備發(fā)熱過(guò)大的問(wèn)題。本次演講內(nèi)容將重點(diǎn)分享超分辨技術(shù)在移動(dòng)端落地的探索和實(shí)踐經(jīng)驗(yàn),內(nèi)容包括對(duì)抗神經(jīng)網(wǎng)絡(luò)、模型剪枝壓縮等。
Topic:基于深度學(xué)習(xí)實(shí)時(shí)直播內(nèi)容風(fēng)控
Speaker:關(guān)濤 數(shù)美研發(fā)中心總經(jīng)理
隨著互聯(lián)網(wǎng)高速發(fā)展,直播場(chǎng)景日益豐富,違規(guī)音頻視頻圖片已經(jīng)泛濫成災(zāi);同時(shí)國(guó)家內(nèi)容監(jiān)管日益趨嚴(yán),監(jiān)管政策集中出臺(tái),行政處罰愈發(fā)嚴(yán)格,實(shí)時(shí)內(nèi)容風(fēng)控日益重要,傳統(tǒng)的人工方式也已經(jīng)無(wú)法滿足實(shí)時(shí)風(fēng)控的需求,時(shí)代呼喚新的解決方案。數(shù)美基于深度學(xué)習(xí)技術(shù),提出全棧式AI實(shí)時(shí)直播內(nèi)容風(fēng)控的解決方案,包括LSTM、RNN、CNN、GAN等深度學(xué)習(xí)模型,有效識(shí)別直播視頻涉政、暴恐、涉黃等違規(guī)內(nèi)容,保證內(nèi)容合規(guī),凈化了網(wǎng)絡(luò)環(huán)境。
同時(shí),還將有嘉賓分享基于 AI 優(yōu)化的實(shí)時(shí)音頻體驗(yàn)、通過(guò) AI 優(yōu)化音視頻數(shù)據(jù)的實(shí)時(shí)傳輸等話題。
除了 AI 相關(guān)演講以外,本屆大會(huì)還設(shè)立多個(gè)技術(shù)專場(chǎng)以及 WebRTC 工作坊,大會(huì)日程如下:?
?參加大會(huì)你將收獲……
一線團(tuán)隊(duì)的實(shí)踐經(jīng)驗(yàn)與最新技術(shù)趨勢(shì)
提及 RTC 技術(shù),大多數(shù)人首先想到的就是 WebRTC、音視頻編解碼。不過(guò) RTC 技術(shù)還涉及 QoE、實(shí)時(shí)網(wǎng)絡(luò)傳輸,而且正在與 AI、跨平臺(tái)技術(shù),甚至是 5G 碰撞出更多火花。
今年的內(nèi)容主題涉及多項(xiàng)熱門技術(shù),包括?WebRTC、實(shí)時(shí)視頻超分辨率算法、編解碼技術(shù)標(biāo)準(zhǔn)、深度學(xué)習(xí)與音頻優(yōu)化、QoE、高并發(fā)網(wǎng)絡(luò)架構(gòu)、5G、實(shí)時(shí)感官系統(tǒng)、Flutter、ABR 算法、MPEG-DASH?等。有些話題是音視頻工程師們應(yīng)該關(guān)注的新趨勢(shì),也有些實(shí)踐經(jīng)驗(yàn)是可被大多數(shù)架構(gòu)師與應(yīng)用工程師拿來(lái)參考的。所以你將可能會(huì)聽(tīng)到 WebRTC 與深度學(xué)習(xí) CV 算法的結(jié)合、基于 AI 優(yōu)化的 AV1 編解碼、VVC 編解碼技術(shù)標(biāo)準(zhǔn)的未來(lái)、5G 網(wǎng)絡(luò)下的視頻體驗(yàn)優(yōu)化、基于深度學(xué)習(xí)的實(shí)時(shí)直播內(nèi)容風(fēng)控、高并發(fā)實(shí)時(shí)信令以及在教育場(chǎng)景的應(yīng)用,以及更多前沿的技術(shù)經(jīng)驗(yàn)。與全球一線團(tuán)隊(duì)的技術(shù)專家面對(duì)面
今年我們已經(jīng)邀請(qǐng)到了來(lái)自 W3C、搜狗、微軟小冰、VVC編解碼標(biāo)準(zhǔn)組、字節(jié)跳動(dòng)、Hulu、滬江 CCTalk、Bilibili、閑魚(yú)、聲網(wǎng)、Janus開(kāi)源項(xiàng)目、AVS編解碼標(biāo)準(zhǔn)組、上海交大等公司、組織機(jī)構(gòu)的一線技術(shù)專家,有首席科學(xué)家、資深架構(gòu)師、資深工程師,也有研究員,各位演講人都總結(jié)過(guò)去一年中實(shí)際研發(fā)經(jīng)驗(yàn),告訴你哪里有坑,哪些技術(shù)、框架值得嘗試,又有哪些實(shí)現(xiàn)邏輯。
1024 來(lái)交個(gè)朋友
1024 不僅僅是 RTC 大會(huì)的第一天,也是程序員的節(jié)日。這一天,又怎么能少了屬于程序員的 After Party 呢?
在大會(huì)上完成一天的“充電”之后,我們將帶著童心未泯的小伙伴們,一起玩耍!?
往屆 RTC 實(shí)時(shí)互聯(lián)網(wǎng)大會(huì)
在往年的大會(huì)上,我們從傳播 WebRTC 與實(shí)時(shí)傳輸架構(gòu),到現(xiàn)在分享 RTC 與更多技術(shù)的融合,以及在更多場(chǎng)景下的應(yīng)用探索。我們希望今年能讓更多開(kāi)發(fā)者了解、學(xué)習(xí)和體驗(yàn)到 RTC 技術(shù)的魅力。?
往年大會(huì)現(xiàn)場(chǎng)
?
?RTC 2019 大會(huì)門票限時(shí)免費(fèi)中,趕快報(bào)名吧!
Tips現(xiàn)在申請(qǐng)限時(shí)免費(fèi)門票,還可獲得150元的Workshop代金券哦~用劵之后,只需38元即可報(bào)名Workshop,不過(guò)席位有限,趕緊行動(dòng)吧!總結(jié)
以上是生活随笔為你收集整理的除了超分辨率,AI 结合 RTC 还有哪些技术实践?的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: IJCAI 2019 论文解读 | 基于
- 下一篇: 为AI学术小白铺平道路,NeurIPS