怎么选择正确的hadoop版本
這篇文章主要為大家展示了“怎么選擇正確的hadoop版本”,內(nèi)容簡(jiǎn)而易懂,條理清晰,希望能夠幫助大家解決疑惑,下面讓小編帶領(lǐng)大家一起研究并學(xué)習(xí)一下“怎么選擇正確的hadoop版本”這篇文章吧。
如何選擇正確的hadoop版本
Hadoop的環(huán)境安裝部署是所有剛開始學(xué)習(xí)hadoop必然要面對(duì)的一個(gè)問題,對(duì)于新手而言基本不會(huì)一次性部署成功,甚至可能要花費(fèi)好幾天的時(shí)間才能完成hadoop運(yùn)行環(huán)境部署。所以對(duì)于新手來說,hadoop版本的選擇還是比較重要的。Hadoop除了Apache這個(gè)版本,還有許多第三方的版本,版本雖多但能夠像大快DKH有效解決hadoop部署管理復(fù)雜的問題很少。
目前hadoop的發(fā)行版除了我們熟知的Apache的開源版本之外,還有Intel發(fā)行版、Cloudera發(fā)行版(CDH)、Hortonworks發(fā)行版(HDP)、MapR等。國(guó)產(chǎn)的發(fā)行版如大快搜索DKH、華為發(fā)行版等。無論是國(guó)外的第三方發(fā)行版,還是國(guó)產(chǎn)的發(fā)行版基本都是基于Apache hadoop衍生出來的。由于hadoop誕生于國(guó)外,所以規(guī)則都是由國(guó)外制定的,國(guó)產(chǎn)發(fā)行版hadoop當(dāng)然不止大快搜索一家,但敢做hadoop底層開發(fā)的也只有大快搜索!也正是由于大快所具備的技術(shù)優(yōu)勢(shì),DKH與其他第三方發(fā)行版hadoop才有這非常明顯的不同。
綜上所述,hadoop版本的選擇是具備多樣性的,理論上你可以選擇Apache發(fā)行版,或者是國(guó)外的第三方發(fā)行版,當(dāng)然也有國(guó)內(nèi)的發(fā)行版可供選擇。但對(duì)于入門級(jí)的新手而言,那些需要進(jìn)行復(fù)雜環(huán)境部署的版本似乎不太適合,我們應(yīng)該將學(xué)習(xí)的重點(diǎn)放在hadoop應(yīng)用開發(fā),而不是把研究的重點(diǎn)放在基礎(chǔ)環(huán)境的安裝。解決基礎(chǔ)環(huán)境安裝復(fù)雜問題的是我們這些做大數(shù)據(jù)底層技術(shù)開發(fā)的責(zé)任和義務(wù)。
如果要給hadoop入門級(jí)新手做一個(gè)hadoop版本的推薦,可以使用DKH的發(fā)行版hadoop。DKH標(biāo)準(zhǔn)版有三個(gè)不同的子版本:用于開發(fā)調(diào)試的單機(jī)版;支持三節(jié)點(diǎn)的學(xué)習(xí)版;支持五節(jié)點(diǎn)以上的標(biāo)準(zhǔn)服務(wù)器版。DKH-分布式SQL版有兩個(gè)子版本:學(xué)習(xí)版和服務(wù)器版。入門級(jí)新手可以選擇DKH標(biāo)準(zhǔn)版中的支持三節(jié)點(diǎn)的學(xué)習(xí)版。
DKH有效的集成了整個(gè)HADOOP生態(tài)系統(tǒng)的全部組件,并深度優(yōu)化,重新編譯為一個(gè)完整的更高性能的大數(shù)據(jù)通用計(jì)算平臺(tái),實(shí)現(xiàn)了各部件的有機(jī)協(xié)調(diào)。如果說的再簡(jiǎn)單點(diǎn)就是基礎(chǔ)運(yùn)行環(huán)境的部署變得異常簡(jiǎn)單,一鍵安裝,隨時(shí)調(diào)用!
總結(jié)
以上是生活随笔為你收集整理的怎么选择正确的hadoop版本的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: php异步传输,php 异步处理-上传文
- 下一篇: gta5怎么加好友(怎么添加好友啊)