對(duì)hadoop初學(xué)者來(lái)說(shuō),或者說(shuō)正在使用hadoop的開(kāi)發(fā)者來(lái)說(shuō),hadoop環(huán)境的搭建不是一件省心的事,甚至很多博客上都重要的事說(shuō)三便“不要花精力在搭建環(huán)境之上”,可見(jiàn)很多人在搭建環(huán)境時(shí)會(huì)遇到很多問(wèn)題,并且會(huì)花費(fèi)很多時(shí)間,本文將把所有的“玩法”都過(guò)一下,相信看完之后,你心里就有數(shù)了,將會(huì)依據(jù)自己的需求來(lái)選擇合適的搭建方式。
讓客戶(hù)滿意是我們工作的目標(biāo),不斷超越客戶(hù)的期望值來(lái)自于我們對(duì)這個(gè)行業(yè)的熱愛(ài)。我們立志把好的技術(shù)通過(guò)有效、簡(jiǎn)單的方式提供給客戶(hù),將通過(guò)不懈努力成為客戶(hù)在信息化領(lǐng)域值得信任、有價(jià)值的長(zhǎng)期合作伙伴,公司提供的服務(wù)項(xiàng)目有:域名與空間、虛擬空間、營(yíng)銷(xiāo)軟件、網(wǎng)站建設(shè)、新林網(wǎng)站維護(hù)、網(wǎng)站推廣。
部署方式 | 優(yōu)勢(shì) | 不足 | 適合場(chǎng)合 |
Apache Hadoop 單機(jī) | 單臺(tái)機(jī)器即可 簡(jiǎn)單 所需組件少 | 一般不用于生產(chǎn) 無(wú)HA 無(wú)法體現(xiàn)分布式 | 初學(xué) 開(kāi)發(fā)測(cè)試 小規(guī)模試用 |
Apache Hadoop 集群 | 靈活的版本選擇 自主可控性較好 應(yīng)用場(chǎng)景廣泛 | 需專(zhuān)業(yè)人員管理 組件間兼容性差 配置、運(yùn)維復(fù)雜 | 學(xué)習(xí) 開(kāi)發(fā)測(cè)試 生產(chǎn)環(huán)境 |
CDH或 HDP | Web管理和監(jiān)控 開(kāi)源廠商支持 兼容性和穩(wěn)定高 | 仍需大量配置 受制于廠商 更新版本稍慢 | 開(kāi)發(fā)測(cè)試 生產(chǎn)環(huán)境 |
其它廠商類(lèi)CDH | 有自己擴(kuò)展特性 廠商支持 | 非免費(fèi) 嚴(yán)重受制于廠商 | 生產(chǎn)環(huán)境 |
編寫(xiě)shell部署運(yùn)維腳本 | 自控性好 配置簡(jiǎn)單 靈活性好 | 需編寫(xiě)腳本 測(cè)試費(fèi)時(shí) 需不斷完善 | 學(xué)習(xí) 開(kāi)發(fā)測(cè)試 生產(chǎn)環(huán)境 |
通過(guò)上面的對(duì)比,總結(jié)如下:
初學(xué)hadoop,希望快速開(kāi)始,采用第一種apache單機(jī),無(wú)基礎(chǔ)的情況下1個(gè)小即可完成,有l(wèi)inux基礎(chǔ)除掉安裝虛擬機(jī)、linux的時(shí)間,10分鐘可完成;
用于生產(chǎn)環(huán)境或測(cè)試環(huán)境,采用第三種cdh方式,管理集群都是圖形化,但是缺少了對(duì)內(nèi)部深層次的了解;
對(duì)于深入學(xué)習(xí)者,已經(jīng)有一定經(jīng)驗(yàn)和積累了,可以選最后一種,不斷可以深入的了解內(nèi)部各進(jìn)程依賴(lài)關(guān)系,還可以提升shell腳本文件編程水平。
關(guān)于每一種環(huán)境的詳細(xì)搭建方式,將會(huì)分幾個(gè)章節(jié)在后面分別介紹,另外如果可能也會(huì)錄制一些免費(fèi)視頻,詳細(xì)的講解一下操作步驟。
當(dāng)前標(biāo)題:分析幾種Hadoop集群部署方式優(yōu)劣
文章鏈接:http://www.chinadenli.net/article40/goooeo.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站維護(hù)、網(wǎng)站制作、網(wǎng)站設(shè)計(jì)、企業(yè)網(wǎng)站制作、網(wǎng)站改版、網(wǎng)頁(yè)設(shè)計(jì)公司
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶(hù)投稿、用戶(hù)轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)
網(wǎng)頁(yè)設(shè)計(jì)公司知識(shí)