大快网站:如何选择正确的hadoop版本
大快網(wǎng)站:如何選擇正確的hadoop版本 Hadoop的環(huán)境安裝部署是所有剛開始學習hadoop必然要面對的一個問題,對于新手而言基本不會一次性部署成功,甚至可能要花費好幾天的時間才能完成hadoop運行環(huán)境部署。所以對于新手來說,hadoop版本的選擇還是比較重要的。Hadoop除了Apache這個版本,還有許多第三方的版本,版本雖多但能夠像大快DKH有效解決hadoop部署管理復雜的問題很少。 目前hadoop的發(fā)行版除了我們熟知的Apache的開源版本之外,還有Intel發(fā)行版、Cloudera發(fā)行版(CDH)、Hortonworks發(fā)行版(HDP)、MapR等。國產(chǎn)的發(fā)行版如大快搜索DKH、華為發(fā)行版等。無論是國外的第三方發(fā)行版,還是國產(chǎn)的發(fā)行版基本都是基于Apache hadoop衍生出來的。由于hadoop誕生于國外,所以規(guī)則都是由國外制定的,國產(chǎn)發(fā)行版hadoop當然不止大快搜索一家,但敢做hadoop底層開發(fā)的也只有大快搜索!也正是由于大快所具備的技術優(yōu)勢,DKH與其他第三方發(fā)行版hadoop才有這非常明顯的不同。 綜上所述,hadoop版本的選擇是具備多樣性的,理論上你可以選擇Apache發(fā)行版,或者是國外的第三方發(fā)行版,當然也有國內的發(fā)行版可供選擇。但對于入門級的新手而言,那些需要進行復雜環(huán)境部署的版本似乎不太適合,我們應該將學習的重點放在hadoop應用開發(fā),而不是把研究的重點放在基礎環(huán)境的安裝。解決基礎環(huán)境安裝復雜問題的是我們這些做大數(shù)據(jù)底層技術開發(fā)的責任和義務。 如果要給hadoop入門級新手做一個hadoop版本的推薦,可以使用DKH的發(fā)行版hadoop。DKH標準版有三個不同的子版本:用于開發(fā)調試的單機版;支持三節(jié)點的學習版;支持五節(jié)點以上的標準服務器版。DKH-分布式SQL版有兩個子版本:學習版和服務器版。入門級新手可以選擇DKH標準版中的支持三節(jié)點的學習版。 DKH有效的集成了整個HADOOP生態(tài)系統(tǒng)的全部組件,并深度優(yōu)化,重新編譯為一個完整的更高性能的大數(shù)據(jù)通用計算平臺,實現(xiàn)了各部件的有機協(xié)調。如果說的再簡單點就是基礎運行環(huán)境的部署變得異常簡單,一鍵安裝,隨時調用!重點是,標準三節(jié)點的學習版是免費提供提下載的!
DKH標準版 DKH-分布式SQL版 DK.HADOOP發(fā)行版
DKH標準版有三個不同的子版本:用于開發(fā)調試的單機版;支持三節(jié)點的學習版;支持5節(jié)點以上的標準服務器版 DKH-分布式SQL版有兩個子版本:學習版、服務器版
總結
以上是生活随笔為你收集整理的大快网站:如何选择正确的hadoop版本的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 【es6】数组排重
- 下一篇: [Leetcode] Bus Route