如何搭建一个完整的手机直播系统源码?
首先第一步,采集,iOS是比較簡(jiǎn)單的,Android則要做些機(jī)型適配工作,PC最麻煩各種奇葩攝像頭驅(qū)動(dòng),出了問(wèn)題特別不好處理,建議放棄PC只支持手機(jī)主播,目前幾個(gè)新進(jìn)的直播平臺(tái)都是這樣的。
第二部,前處理,現(xiàn)在直播美顏已經(jīng)是標(biāo)配了,80%的主播沒(méi)有美顏根本沒(méi)法看。美顏算法需要用到GPU編程,需要懂圖像處理算法的人,沒(méi)有好的開(kāi)源實(shí)現(xiàn),要自己參考論文去研究。難點(diǎn)不在于美顏效果,而在于GPU占用和美顏效果之間找平衡。GPU雖然性能好,但是也是有功耗的,GPU占用太高會(huì)導(dǎo)致手機(jī)發(fā)燙,而手機(jī)發(fā)燙會(huì)導(dǎo)致攝像頭采集掉幀,iPhone6尤其明顯,因?yàn)閕Phone6的CPU和前置攝像頭很近。
第三部,編碼,肯定要采用硬編碼,軟編碼720p完全沒(méi)希望,勉強(qiáng)能編碼也會(huì)導(dǎo)致CPU過(guò)熱燙到攝像頭。硬編碼兼容性又是一個(gè)大坑,android上要有人去填。編碼要在分辨率,幀率,碼率,GOP等參數(shù)設(shè)計(jì)上找到最佳平衡點(diǎn)。
第四部,傳輸,自己做不現(xiàn)實(shí),交給CDN服務(wù)商吧,也就是貴了點(diǎn),相信有志于做直播平臺(tái)改變世界的你不差錢(qián)。假設(shè)2W PCU大約每月帶寬費(fèi)用100萬(wàn)左右,因?yàn)榍逦鲿车?20p要1.5mbps左右。CDN只提供了帶寬和服務(wù)器間傳輸,發(fā)送和接收端的網(wǎng)絡(luò)連接抖動(dòng)緩沖還是要自己寫(xiě)的。不想要卡頓,必然要加大緩沖,會(huì)導(dǎo)致延遲高,延遲高影響互動(dòng)性,要做權(quán)衡。
要想用于推流還必須把音視頻數(shù)據(jù)使用傳輸協(xié)議進(jìn)行封裝,變成流數(shù)據(jù)。常用的流傳輸協(xié)議有RTSP、RTMP、HLS等,使用RTMP傳輸?shù)难訒r(shí)通常在1–3秒,對(duì)于移動(dòng)直播這種實(shí)時(shí)性要求非常高的場(chǎng)景,RTMP也成為移動(dòng)直播中最常用的流傳輸協(xié)議。最后通過(guò)一定的Qos算法將音視頻流數(shù)據(jù)推送到網(wǎng)絡(luò)斷,通過(guò)CDN進(jìn)行分發(fā)。在直播場(chǎng)景中,網(wǎng)絡(luò)不穩(wěn)定是非常常見(jiàn)的,這時(shí)就需要Qos來(lái)保證網(wǎng)絡(luò)不穩(wěn)情況下的用戶(hù)觀看直播的體驗(yàn),通常是通過(guò)主播端和播放端設(shè)置緩存,讓碼率均勻。另外,針對(duì)實(shí)時(shí)變化的網(wǎng)絡(luò)狀況,動(dòng)態(tài)碼率和幀率也是最常用的策略。
當(dāng)然,在網(wǎng)絡(luò)傳輸方面全部自己來(lái)做基本不現(xiàn)實(shí),找提供推流服務(wù)的CDN服務(wù)商提供解決方案是最好的選擇。據(jù)了解,阿里云是國(guó)內(nèi)唯一能自研CDN緩存服務(wù)器的廠商,性能非常有保障。當(dāng)然,大多數(shù)直播平臺(tái)都會(huì)同時(shí)接入多個(gè)視頻云服務(wù)提供商,這樣可以做拉流線路互備,對(duì)推流后視頻集群再進(jìn)行優(yōu)化也可提高直播的流暢性和穩(wěn)定性。
總結(jié)
以上是生活随笔為你收集整理的如何搭建一个完整的手机直播系统源码?的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: 面试官:如果让你设计一个消息中间件,如何
- 下一篇: 记Thoughtworks一次糟糕的面试