是MPEG没有未来，还是未来不需要MPEG
6月6日，MPEG創(chuàng)始人&召集人Leonardo Chiariglione辭職，并在自己的博客中稱“MPEG is closed”。事實上，MPEG工作組并沒有真正停擺，只是經(jīng)過了一番重組。重組之后的MPEG并不如Leonardo所想，而他的職位也似乎也變得有名無實，老先生因此選擇了離開。
要了解MPEG，可能要先從了解ISO開始
ISO(International Organization for Standardization國際標準化組織）一九四七年在第二次世界大戰(zhàn)的廢墟上成立，它的工作聽起來既簡單又神圣，那就是為全人類制定標準。ISO的總部位于日內(nèi)瓦，參與者為各成員國的國家標準機構(gòu)和公司。
因此，ISO是一個國際性的非政府組織的同時，它也是一個等級森嚴的組織。甚至說它是一個官僚機構(gòu)也不足為奇，畢竟許多政府機構(gòu)和私營公司都是等級森嚴、官僚主義的。但比起一般公司，ISO的運作卻更像是羅馬帝國，而非普通的官僚機構(gòu)。
從1987年到現(xiàn)在，Leonardo Chiariglione在 ISO工作了大約33年。他在文章中稱， ISO 具有其他標準制定組織所沒有的特性，有些可能是負面的，但同時也存在積極、獨特的方面。
ISO的標準化工作由技術(shù)委員會(TC)負責，而技術(shù)委員會由秘書處管理，秘書處通常從在技術(shù)委員會所服務的行業(yè)中發(fā)揮重要作用的國家里挑選出來。
也就是說， 一個在行業(yè)中扮演重要角色的國家同時還負責為該行業(yè)制定標準，這不僅使得該國在此行業(yè)中具有主導作用，還會因此具有市場支配力。而且國家通過行使指令分配給秘書處的廣泛權(quán)力，最終也能夠控制該領(lǐng)域的標準。
Leonardo還列舉過一些個人經(jīng)歷以及自己親眼目睹的ISO“官僚主義”事件：
在一次Leonardo代表意大利參加的JTC 1（Joint Technology Committee 聯(lián)合技術(shù)委員會 同樣屬于ISO）會議上，他向一位小組委員會主席介紹自己是 MPEG的召集人，Leonardo的想法是 MPEG 與該委員會可以在一些共同感興趣的問題上合作。而那位主席卻是一副“你這個卑微的工作組召集人怎么敢跟我這個委員會主席說話? ”的態(tài)度，然后，他因礙于面子又勉（居）為（高）其（臨）難（下）地和Leonardo談了半分鐘。
還有一次是為一個常設委員會主席頒發(fā)一個獎項，而該委員會最顯著的成就是主持了常設委員會一次最短的全體年度會議。這又是典型的封建主官僚義: 步兵首當其沖，但總是軍官獲得勛章。
同時，Leonardo也客觀地指出，ISO 在重要事項方面并不是封建的。雖然比起一般組織，ISO更像是羅馬帝國。但羅馬帝國需要有人以死效忠，也會出現(xiàn)屠殺、賄賂甚至是推翻政權(quán)的起義。但在ISO—— 一個國際標準化組織——該組織的技術(shù)委員會永遠不會試圖得到或控制某個組委會。至少在ISO 工作的人們都是正直的，他們永遠不會被賄賂、被甜言蜜語、承諾或威脅所說服而改變自己的志向。
只是在許多情況下，“封建主義”恰巧是一種適合 ISO 的屬性。
世界上有兩種人類組織：
以總體規(guī)劃為基礎創(chuàng)建和發(fā)展的人類組織，這樣的組織總有一天會發(fā)現(xiàn)，世界比它們開始時所設想的要復雜得多；
還有一些沒有總體規(guī)劃、根據(jù)實際需要而成立的組織，他們則遲早會發(fā)現(xiàn)，其組織結(jié)構(gòu)亟需被進一步合理化。
1947年成立的ISO 就是后者，當時沒有創(chuàng)建標準化領(lǐng)域的總體計劃。從技術(shù)委員會(TC)的設立方式——根據(jù)需要設立技術(shù)委員會——就可以很容易地看出這一點：
TC1: 螺紋
TC2: 緊固件
TC3: 限制和配合
TC4: 滾動軸承
TC5: 黑色金屬管和金屬配件
TC6：紙，板和紙漿
TC7：鉚釘
TC8: 船舶和海洋技術(shù)
事實上，在解決了“黑色金屬管道和金屬配件”的標準需求之后，ISO 又為“紙張、紙板和紙漿”創(chuàng)建了一個 專門的TC。無獨有偶， 在制定了“鉚釘”標準之后，ISO繼而又成立了“船舶和海洋技術(shù)”TC。
邏輯就是這么個邏輯，大家可以試著想象一下同樣歸屬于ISO的MPEG是如何應運而生的。
在Leonardo眼里，這樣做其實是正確的，當然你也可以嘗試去制定一個總體規(guī)劃或描繪一整個行業(yè)圖景。但即使你做到了，幾年后，技術(shù)的進步也會讓這個規(guī)劃很快過時。
但有一點，除了常規(guī)的TC（Technology Committee 技術(shù)委員會），ISO還有一個非常規(guī)TC——JTC 1（Joint Technology Committee 聯(lián)合技術(shù)委員會）。JTC 1涵蓋的領(lǐng)域非常廣泛: 字符集、電信、軟件和系統(tǒng)工程、安全設備、數(shù)字記錄媒體、辦公設備、數(shù)字媒體、安全、學習信息技術(shù)、生物特征識別、用戶界面、云計算、物聯(lián)網(wǎng)、人工智能等等。
Leonardo認為這種情況并不合理，因為 JTC 1不再是按“一個 TC 負責一個領(lǐng)域”的邏輯發(fā)展出來的下屬機構(gòu)，相反，它集合了許多領(lǐng)域（很多時候這些領(lǐng)域彼此之間是完全分離的）。
這里還有另一個更嚴重的問題。在 ISO 制定的22962標準中，JTC 1制定了3249個標準，約占所有 ISO 標準的14% （MPEG 產(chǎn)生的標準約占16%）。?
但JTC 1實體(SCs、 AGs 和 WGs)的實際成員可能占 ISO 實體(TC、 SCs、 SCs、 AGs 和 WGs)全體成員的30% 。ISO收到的專利聲明中，約80% 與JTC 1標準有關(guān)(其中約71% 與 MPEG 標準有關(guān))。
補充一點，JTC 1與 TC 291“家用燃氣煮食器具”有相同的管治，而這一類目至今仍未制訂任何標準。
這里附一份截至2020年6月的JTC 1小組委員會的組成：
編碼字符集
系統(tǒng)之間的電信和信息交換
軟件和系統(tǒng)工程
Sc 17個人身份證和保安裝置
Sc 22程序設計語言及其環(huán)境和系統(tǒng)軟件接口
Sc23用于信息交換和存儲的數(shù)字記錄媒體
Sc 24計算機圖形學，圖像處理和環(huán)境數(shù)據(jù)表示
Sc 25資訊科技設備互連
Sc 27資訊科技保安技術(shù)
Sc 28辦公室設備
Sc 29音頻、圖片、多媒體和超媒體信息的編碼
31自動資料收集技術(shù)
Sc32數(shù)據(jù)管理和交換
Sc 34文件描述和處理語言
Sc 35用戶界面
Sc 36用于學習、教育和培訓的信息技術(shù)
SC 37? Biometrics
Sc38云計算和分布式平臺
Sc 39資訊科技的可持續(xù)發(fā)展
Sc 40資訊科技服務管理與資訊科技管治
Sc 41物聯(lián)網(wǎng)及相關(guān)技術(shù)
Sc42人工智能
以下內(nèi)容由LiveVideoStack據(jù)MPEG創(chuàng)始人&召集人Leonardo Chiariglione的博文整理而成。老先生筆耕不輟，近一個月儼然成了專業(yè)的“內(nèi)容生產(chǎn)者”。人們對這些文章的看法大相徑庭，在這里我們不做評論，各位如果有興趣可移步Leonardo的博客一探究竟。
是MPEG沒有未來
還是未來不需要MPEG
作者：Leonardo Chiariglione
原文鏈接：https://blog.chiariglione.org/a-future-without-mpeg/#situation
引言
本來我這周的計劃是探討 MPEG 未來幾年的前景， 但現(xiàn)如今有一個重大的消息: MPEG 于歐洲中部時間2020?年6月2日16:30?不復存在了。痛苦的過程總是漫長的，但結(jié)果在最初就可以預見。部分原因與 ISO組織的天然屬性有關(guān)，我在這里描述的ISO 的主要特征可見于另一篇博客——IOS，一個封建組織（https://blog.chiariglione.org/this-is-iso-a-feudal-organisation/
）。
曾經(jīng)的標準參考組織占世界生產(chǎn)總值的近2%?（也就是15萬億美元），它影響著數(shù)十億人的日常生活，現(xiàn)在卻成了一地雞毛。將所有媒體組件（同時被大多數(shù)標準機構(gòu)和公司所模仿）集中在一個委員會的激進的革新已經(jīng)不復存在。現(xiàn)在，ISO 媒體標準反而被區(qū)別對待。上帝保佑有人會把破碎的ISO重新拼湊起來。
MPEG?的消逝則是“雪上加霜”，對此，我曾發(fā)表過幾篇文章:?A crisis, the causes and a solution,?Can MPEG overcome its Video “crisis”?,?Business model based ISO/IEC standards, and?IP counting or revenue counting?（https://blog.chiariglione.org）
但在發(fā)表了那些文章之后，我又被迫保持沉默，現(xiàn)在是時候再次發(fā)聲了，而且這將是更加響亮和清晰的聲音：
那些創(chuàng)建了新的知識產(chǎn)權(quán)的人必須有權(quán)利去使用它；
技術(shù)創(chuàng)新應該受到能夠識別、決定和保護知識產(chǎn)權(quán)制度的組織的大力獎勵；
那些按照官方標準機構(gòu)宣布技術(shù)規(guī)范、提供知識產(chǎn)權(quán)的人應比那些不提供知識產(chǎn)權(quán)的人受益更多。
同時，他們也應該有更多的義務。
當下的狀況
我不會花太多時間追憶那些把 IP 置于 MPEG 標準中的公司是如何獲得豐厚回報的。據(jù)一位知情人士透露（我還不能證實他的說法），在 MPEG-2標準有效期間，MPEG-2專利持有者每年可以分享近10億美元的收入。
大多數(shù)知識產(chǎn)權(quán)持有者用這筆錢對新技術(shù)進行了再投資，這些新技術(shù)為 MPEG 的良性循環(huán)提供了動力，畢竟MPEG包含了180多個標準（其中還包括了6個視頻編碼標準和6個音頻編碼標準）。
遺憾的是，只有在童話故事中，故事才以“ ... ... 最后他們幸福地生活在一起”結(jié)束。MPEG 在 MPEG-2之后并沒有“幸福的生活”，因為大多數(shù) MPEG-2 IP 持有者都使用以下(視頻)編碼標準，并且很難適應互聯(lián)網(wǎng)視頻分發(fā)模式。
此外，HEVC 的知識產(chǎn)權(quán)持有者數(shù)量激增至45個，其中2 / 3屬于現(xiàn)有的3個專利池之一，剩下的1 / 3則不屬于任何專利池。這并不令人感到驚訝，HEVC 標準在廣播時代是有一些用途，但是它在網(wǎng)絡時代的使用僅占比寥寥12%?。如果有人認為廣播是一個豐富但正在衰退的市場，而網(wǎng)絡視頻正在不斷崛起，那么他們也應該明白 ISO 標準將逐漸降級到一個越來越邊緣化的市場。
參賽者
當 MPEG-4視頻許可證將 MPEG-4視頻標準判處死刑時，競爭者們接連出現(xiàn)。不得不提的四個名字是 Real Networks、Microsoft、On 2和 Google。私有公司能夠整合具有商業(yè)價值的視頻編解碼器的事實表明，視頻編碼已經(jīng)是一項成熟的技術(shù)，“任何人”都可以整合出一種性能合理的解決方案。
由于許多視頻編碼專利在申請20年后才能獲得，因此 MPEG 嘗試 整理出一個視頻編碼規(guī)范也很合理，該規(guī)范可以在沒有許可證的情況下使用，如果可能的話，甚至還可以免費使用許可證。MPEG這樣做的基本原理是:?你是希望讓自己的客戶被競爭對手服務——而不看到他們回頭——還是希望你自己就可以為客戶提供一個響應其需求的解決方案？
MPEG通過3種不同的途徑來實現(xiàn)這個目標:
定義一個免版稅的 AVC baseline(稱為WebVC)。
一些 AVC 專利持有者確認了他們的版稅專利聲明（royalty bearing patent declarations）；
從頭開發(fā)一個免版稅的標準；
從現(xiàn)有的解決方案開發(fā)一個免版稅的標準。
我們從這三段經(jīng)歷中學到了什么？當然，不應強迫一家公司免費提供一項專利，但同時 ISO 的規(guī)則是允許一家公司僅通過發(fā)表警告性聲明“我擁有只有我愿意才能授權(quán)的專利”?，就可以防止無許可?/?免費授權(quán)標準的發(fā)生。
現(xiàn)在有什么?/?將會有什么
一些公司提出了一個初始的建議，即制定一個標準，以避免知識產(chǎn)權(quán)不受控制的流動，有時這種流動的價值值得懷疑，并附帶同意許可證的負擔。該提案要求:
1. 一種雙層編碼方案：
a. 基礎層必須包含有20年以上的技術(shù)或者可以免費訪問的技術(shù)，并且能夠?qū)?AVC 作出重大改進；
b. 第二層應該提供比 HEVC 更顯著的改善。
2. 鼓勵宣布許可證條款將在FDIS批準后的兩年內(nèi)公布。
該標準被稱為關(guān)鍵視頻編碼(EVC)?，已于2020年4月送達 FDIS。最終的性能數(shù)據(jù)還沒有公布，但是預計 EVC 基層將比 AVC 優(yōu)化20%?左右，EVC 整體將比 HEVC 優(yōu)化30%?。許可證條款則尚不清楚。
預計Versatile Video Coding (VVC)（最新的視頻編碼標準）將在四周內(nèi)達到 FDIS。（LiveVideoStack注：VVC v1在7月2日已完成定稿。）
為了完成視頻編碼標準的整理，低復雜度增強視頻編碼(Low Complexity Enhancement Video Coding，LCEVC)有望送達 FDIS。在適當?shù)臈l件下，結(jié)合 LCEVC 和N世代編解碼器應該能夠提供與N + 1世代編解碼器質(zhì)量相當?shù)男阅堋?/p>
市場提供了什么
市場并沒有停下腳步。2015年，最初的一批公司(亞馬遜、思科、谷歌、英特爾、微軟、 Mozilla、 Netflix)共同創(chuàng)建了開放媒體聯(lián)盟(AOM)?，初始目標聚焦在視頻領(lǐng)域。? AOM 提到了第一個規(guī)范 AV1的4個主要特性:
免版稅生態(tài)系統(tǒng)
專利審查程序與司法辯護基金
尖端技術(shù)
協(xié)作式開源開發(fā)
其他媒體編碼標準的許可
本節(jié)所提供的資料是相對準確的，但如果你打算做一個商業(yè)決定，煩請咨詢律師。
視頻
目前還沒有 MPEG-1視頻的授權(quán)許可，但該標準仍被廣泛使用。
MPEG LA開發(fā)了MPEG-2視頻許可證，MPEG-2也在之后得到了廣泛應用。
MPEG-4 Visual曾經(jīng)的日子并不好過，因為該標準的主要市場目標——流媒體的許可路徑看起來并不合適。
MPEG-4 AVC是一個非常成功的標準，尤其令人自豪的是，它完全可以承擔“通用”屬性，因為它同時也應用于廣播和網(wǎng)絡流媒體。
現(xiàn)在已經(jīng)7年過去了，MPEG-H HEVC 專利持有人仍然沒有共同行動起來在授權(quán)法案上獲得進展，也沒能提出一個體面的統(tǒng)一許可。HEVC可以用于廣播，但在流媒體的使用方面則是有限的。多年來，一位 MPEG 官員一直試圖說服 MPEG 相信 HEVC 在市場上表現(xiàn)良好。
2017年，我主動提議將這一情況提請至聯(lián)合過渡委員會（JTC1），與此同時編寫了一份文件并在組織內(nèi)達成了一致意見。我去 JTC 1展示了這份文件，然而，有幾個國家以程序上的理由提出反對。時至今日，由于這些反對意見，國際標準化組織（IOS）仍然沒有在官方層面意識到專利的問題所在。
音頻
MP3有一個非常簡單和有效的許可證，該標準也因此得到廣泛采用。現(xiàn)在，硬件和軟件 MP3設備的數(shù)量以十億計。
AAC 的專利池擁有有效的許可程序，據(jù)估計，AAC 的硬件和軟件設備數(shù)量多達100億臺。
MPEG-H ?3D Audio已經(jīng)出現(xiàn)了幾年，并且已經(jīng)被 ATSC 3.0采用，但目前還沒有已知的可用許可證。最近，一個預計只包含一家公司的 IP 的配置文件已經(jīng)啟動。3D Audio也仍然有望獲得許可證。
3 D?圖形
過去的標準在這方面沒有多少吸引力。而點云壓縮(PCC)則需要相反的效果。該標準將于一個月后(2020年7月)成為 FDIS。專利持有人的數(shù)量預計將明顯少于 HEVC。
我對下一步視頻編碼標準的看法
HEVC 留下的空白已經(jīng)被 AOM 的 AV1規(guī)范所填補，該規(guī)范現(xiàn)在被廣泛應用于流媒體。
EVC之所以被看好，是因為它雖然比 VVC 性能低，但可以提供與 AV1相當甚至更好的內(nèi)容質(zhì)量。EVC 是有機會獲得下一張牌照的。當然，這還并沒有發(fā)生。
VVC 的專利持有者數(shù)量極有可能遠遠大于 HEVC。2018年成立的媒體編碼行業(yè)論壇的目標是:
進一步采用 MPEG 標準，首先將重點放在 VVC (Versatile Video Coding)上，為消費者和業(yè)界建立廣為接受和廣泛使用的標準。
然而，如果撇開會議上組織的活動不談，到目前為止，外界還沒有得到任何具體的結(jié)果。MC-IF 有31個成員，其中7個是擁有許可權(quán)利的(即略少于所有成員的1/4)。?“行業(yè)”成員只占HEVC 專利持有人的1/2。
在這些情況下，很難相信 VVC 會比 HEVC 表現(xiàn)得更好。它可能會遭遇更糟糕的情況，因為實現(xiàn)VVC 在廣播中的應用將需要好幾年的時間。
EVC 的成功將有助于 VVC 取得成功。看到 了EVC (和 AV1)的威脅，VVC 專利持有者可以一起行動，提供一個體面的許可證。盡管我很認可這樣的發(fā)展，但我仍認為這種可能性很小。
一個像樣的許可證可以顛覆現(xiàn)有的格局，對 VVC 來說，另一個威脅可能意味著：對VVC 專利持有者來說，提供一個單一的和體面的許可證將面臨著更多的壓力。
披露
現(xiàn)在我終于可以公開分享，為防止曾經(jīng)的?MPEG?視頻編碼消失，我都有哪些想法:
如果未來只剩下VVC，那么VVC自身也無路可走；
EVC將成為 HEVC 和 VVC 之間的夾層標準；
在適當?shù)臈l件下，基于 EVC 的 LCEVC 可以在質(zhì)量上與 VVC 競爭；
如果 EVC 能夠成功，那么 VVC 就有機會，如果專利持有者能夠感受到競爭并同意一個像樣的許可證的話。
很少有人明白我的目標從來不是促進 EVC 本身的成功。通過推廣 EVC，我打算推動內(nèi)部競爭，從而促進 VVC 的成功。如果這不會發(fā)生，忠實的 MPEG 客戶仍然有機會購買現(xiàn)存的唯一有競爭力的 MPEG 視頻編解碼器——EVC。再加上 LCEVC，他們一樣可以獲得最先進的性能。
我的預測
我對未來的預測并不樂觀，原因如下:
1. 不再有統(tǒng)一的MPEG，又或者說，MPEG實際上將不復存在。這一切都是不可避免的，現(xiàn)如今只是在等待人們真正去做到那一步而已。因為MPEG及其對整個行業(yè)的影響，就像中世紀一座隨時準備受到強大軍隊攻擊的自由城市。正如700年前的三國演義里寫的那樣：話說天下大勢，分久必合，合久必分。而長期以來，大約也就是30年以來，MPEG一直在進行著統(tǒng)一運作。
2. SC 29公認的負責人還沒有對未來發(fā)表任何觀點。這幾乎是一個喪鐘，因為數(shù)字媒體正在一個成熟的市場上以飛快（甚至有點過于快了）的速度發(fā)展。如果 ISO 等市場發(fā)揮作用，然后再去制定一個標準，它就會失去自己本身的時間標準。MPEG已經(jīng)博弈了30年，有時贏有時輸。
3. 最重要的是，現(xiàn)在市場已經(jīng)想出了一個解決方案——那就是開放媒體聯(lián)盟(Alliance for Open Media)的 AV1——該方案能夠提供表現(xiàn)良好的規(guī)范，而且不需要版權(quán)費，并承諾為受到攻擊的會員提供保護(這是有附加條件的，但人們只關(guān)注眼前的利益，而很少考慮自己的選擇在5年后會帶來什么影響)。
那么，接下來會發(fā)生什么呢？
如果 EVC/LCEVC發(fā)展態(tài)勢很好：
VVC也有希望被廣泛應用。專利持有人將獲得預期的版稅流量，并感到支持 MPEG 模式仍然有利可圖，因此可能愿意進一步投資 MPEG。然而，由于這種情況只會在2-3年的時間段內(nèi)出現(xiàn)，專利持有者將不得不再給予 MPEG 2到3年的支持與信任。
如果EVC/LCEVC發(fā)展態(tài)勢不好，我會考慮以下五種情況:
1.奇跡發(fā)生。VVC專利持有者將共同行動，提供一個像樣的許可證。然而，奇跡并不常見，因為它們往往象征著需要有圣徒追隨。
2.NPEs/?大學?/?行業(yè)研究試圖通過“假裝整個業(yè)界都會使用生產(chǎn)的‘標準’ ”來維持環(huán)境的活力。這種情況將持續(xù)一段時間，直到上級管理層意識到自己在浪費時間和金錢。
3.這樣的環(huán)境成為了一個評估“論文”(不是真正的貢獻)?以產(chǎn)生“文件”(不是標準)的特殊“會議”(不是標準會議)?。?“文件”的價值在于評估技術(shù)”價值”的”技術(shù)篩選過程”?，以便那些希望制定規(guī)范(例如AOM)的人知道它們是被篩選出來的優(yōu)秀技術(shù)，這或許可以拯救NPE的商業(yè)模式。
4.這樣的環(huán)境還要負責維護大量的標準。這可能會變得很困難，為換取新標準中的一些樂趣(這種標準將不再存在)而去維持舊標準，對技術(shù)專家的吸引力還遠遠不夠。
5.這樣的環(huán)境會成為公開可用的規(guī)格(PAS)供應商(例如 AOM)將其規(guī)格轉(zhuǎn)換為 ISO 標準的地方。如果真要墮落到如此境地，我希望彼時自己已經(jīng)不在這個世界上了。
現(xiàn)在
Something is going to happen…
翻譯&編輯：Coco Liang
LiveVideoStackCon 2020?北京
2020年10月31日-11月1日
點擊【閱讀原文】了解更多詳細信息
總結(jié)
以上是生活随笔為你收集整理的是MPEG没有未来，还是未来不需要MPEG的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。
- 上一篇： AWS发布低延迟互动直播服务
- 下一篇： 视频生产环境下的音视频解决方案