隨著Apache Hadoop的起步,云客戶的增多面臨的首要問題就是如何為他們新的的Hadoop集群選擇合適的硬件。
盡管Hadoop被設(shè)計(jì)為運(yùn)行在行業(yè)標(biāo)準(zhǔn)的硬件上,提出一個(gè)理想的集群配置不想提供硬件規(guī)格列表那么簡(jiǎn)單。 選擇硬件,為給定的負(fù)載在性能和經(jīng)濟(jì)性提供最佳平衡是需要測(cè)試和驗(yàn)證其有效性。(比如,IO密集型工作負(fù)載的用戶將會(huì)為每個(gè)核心主軸投資更多)。
在這個(gè)博客帖子中,你將會(huì)學(xué)到一些工作負(fù)載評(píng)估的原則和它在硬件選擇中起著至關(guān)重要的作用。在這個(gè)過程中,你也將學(xué)到Hadoop管理員應(yīng)該考慮到各種因素。
結(jié)合存儲(chǔ)和計(jì)算
過去的十年,IT組織已經(jīng)標(biāo)準(zhǔn)化了刀片服務(wù)器和存儲(chǔ)區(qū)域網(wǎng)(SAN)來滿足聯(lián)網(wǎng)和處理密集型的工作負(fù)載。盡管這個(gè)模型對(duì)于一些方面的標(biāo)準(zhǔn)程序是有相當(dāng)意義 的,比如網(wǎng)站服務(wù)器,程序服務(wù)器,小型結(jié)構(gòu)化數(shù)據(jù)庫,數(shù)據(jù)移動(dòng)等,但隨著數(shù)據(jù)數(shù)量和用戶數(shù)的增長,對(duì)于基礎(chǔ)設(shè)施的要求也已經(jīng)改變。網(wǎng)站服務(wù)器現(xiàn)在有了緩存 層;數(shù)據(jù)庫需要本地硬盤支持大規(guī)模地并行;數(shù)據(jù)遷移量也超過了本地可處理的數(shù)量。
微軟Bing搜索是國際領(lǐng)先的搜索引擎,為中國用戶提供網(wǎng)頁、圖片、視頻、詞典、翻譯、地圖等全球信息搜索服務(wù)。
Warting.com整合國內(nèi)外優(yōu)質(zhì)的設(shè)計(jì)資源,內(nèi)容涉及平面設(shè)計(jì),UI設(shè)計(jì),工業(yè)設(shè)計(jì),環(huán)藝設(shè)計(jì),服裝設(shè)計(jì),插畫,國畫,油畫,攝影等領(lǐng)域,提供最新的行業(yè)資訊,設(shè)計(jì)...
云端會(huì)計(jì)軟件開發(fā)公司是新西蘭一家公司開發(fā)的為中小企業(yè)提供簡(jiǎn)單的云端會(huì)計(jì)軟件,密切已有24萬使用者,6萬付費(fèi)用戶。
FrogDesign是來自美國的一家專業(yè)創(chuàng)意設(shè)計(jì)公司。該公司被譽(yù)為硅谷的歐洲品味,并把這種美麗和優(yōu)雅帶入IT制造領(lǐng)域。
開源之家專業(yè)為你提供各種免費(fèi)商業(yè)源碼下載、.net源碼下載、網(wǎng)站素材、網(wǎng)頁游戲源碼、直銷軟件、織夢(mèng)模板等。
“視覺癖”是一個(gè)聚合設(shè)計(jì)師資源的綜合社區(qū),主要提供設(shè)計(jì)師交流論壇、設(shè)計(jì)師尋找設(shè)計(jì)靈感的圖庫、各種設(shè)計(jì)教程,不管是新手還是老司機(jī)這里都有你需要的資源,尤其是欣賞高...