Netflix的IT基礎設施完全搭建在AWS之上，盡管AWS一直在降價，但對于完全依賴AWS的Netflix而言，成本依然居高不下。視頻編碼是重度消耗CPU的業務，通過內部的二級市場，即將未充分利用的計算濟源在內部進行二次銷售，Netflix減少了92%的編碼成本。本文來自Netflix高級SRE，Dave Hann在re:invent 2017大會上的分享，并由科技博客博主Todd Hoff進行了內容整理，LiveVideoStack對其進行了摘譯。

文 /?Todd Hoff

譯 / Ant

Netflix通過內部的現貨市場節省了92%的視頻編碼成本。在2017年的re:Invent大會上，Netflix高級SRE Dave Hann做了“A Day in the Life of a Netflix Engineer”的分享（點擊閱讀原文訪問Dave的演講視頻），介紹了Netflix是如何做到的。

Netflix使用了3個AWS的region，幾十萬個EC2實例，其中許多實例并未充分使用。

視頻編碼占Netflix全部CPU技術能力的70%，30萬個CPU，以及1000個不同的自動擴展組（autoscaling groups）。

那么，為什么不創造一個二級市場，用于視頻編碼？

Netflix視頻編碼流程

從生產商獲得視頻之后，首先對其進行檢查，包括丟幀、變色等各種問題。

視頻文件非常大，往往以TB為記，處理這么大的視頻文件顯然并不明智，于是要將原始視頻文件分割成小塊，對其并行處理。

視頻塊送到多媒體處理流水線，那里有大量的編碼工作要做。Netflix支持2200種的設備以及多種編解碼器，所以需要輸出大量不同的格式視頻。

視頻塊編碼完成后，將再次進行校驗，以確認沒有產生任何問題。接下來，將視頻塊集成在一起，生成完整的視頻。最后，再進行一次校驗。

在多媒體流水線中超過70個不同的軟件進行協作。

Netflix認為靜態編碼后的視頻觀看體驗超過動態編碼，其結果是要生成大量的文件。

《Stranger Things》第二季為8K分辨率，有8幕。原始文件容量數以TB。每一季需要19萬個CPU小時來編碼，相當于2965個m4.16xlarge實例運營1小時。靜態編碼需要生成9570個不同的視頻、音頻和文本文件。

Netflix如何編碼？

一種顯而易見的方法是，為編碼流水線專門保留一部分實例。這種方式的結果好處是，計算資源隨時可用。

不過，編碼是一種爆炸性的工作負載，這意味著這些保留實例大部分時間并不能充分利用。

這種爆炸性的工作負載可以開啟二級市場，用于爆發性的工作負載。

AWS有二級市場，為什么不直接使用？Netflix有大量的保留實例，在一天的內，他們可以自動擴展或縮小10000個實例。當自動縮小后，就有許多未用的資源。

于是Netflix建立了自己的二級市場，用于視頻塊的編碼。工程師工具團隊建立了專門的API，實時（以分鐘為單位）暴露未用的資源。

通過內部的二級市場節省了92%的編碼資源。

云經濟學

和AWS一樣，Netflix開啟自己的二級市場也出于同樣的原因：云經濟的目標就是提高機器的利用率。利用好保留實例，以榨取其更多價值。CPU一個千分之一秒不在工作都是一種浪費。

越來越顯現，AWS（及其友商）將會成為基礎設施的吞噬者。

LiveVideoStack招募社區編輯

LiveVideoStack是專注在音視頻、多媒體開發的技術社區，通過傳播最新技術探索與應用實踐，幫助技術人員成長，解決企業應用場景中的技術難題。如果你有意為音視頻、多媒體開發領域發展做出貢獻，歡迎成為LiveVideoStack社區編輯的一員。你可以翻譯、投稿、采訪、提供內容線索等。

通過contribute@livevideostack.com聯系，或在LiveVideoStack公眾號回復『社區編輯』了解詳情。

總結

以上是生活随笔為你收集整理的Netflix如何节省92%视频编码成本？的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。