隨著Apache Hadoop的起步,云客戶的增多面臨的首要問題就是如何為他們新的的Hadoop集群選擇合適的硬件。
盡管Hadoop被設(shè)計(jì)為運(yùn)行在行業(yè)標(biāo)準(zhǔn)的硬件上,提出一個(gè)理想的集群配置不想提供硬件規(guī)格列表那么簡(jiǎn)單。 選擇硬件,為給定的負(fù)載在性能和經(jīng)濟(jì)性提供最佳平衡是需要測(cè)試和驗(yàn)證其有效性。(比如,IO密集型工作負(fù)載的用戶將會(huì)為每個(gè)核心主軸投資更多)。
在這個(gè)博客帖子中,你將會(huì)學(xué)到一些工作負(fù)載評(píng)估的原則和它在硬件選擇中起著至關(guān)重要的作用。在這個(gè)過程中,你也將學(xué)到Hadoop管理員應(yīng)該考慮到各種因素。
結(jié)合存儲(chǔ)和計(jì)算
過去的十年,IT組織已經(jīng)標(biāo)準(zhǔn)化了刀片服務(wù)器和存儲(chǔ)區(qū)域網(wǎng)(SAN)來滿足聯(lián)網(wǎng)和處理密集型的工作負(fù)載。盡管這個(gè)模型對(duì)于一些方面的標(biāo)準(zhǔn)程序是有相當(dāng)意義 的,比如網(wǎng)站服務(wù)器,程序服務(wù)器,小型結(jié)構(gòu)化數(shù)據(jù)庫,數(shù)據(jù)移動(dòng)等,但隨著數(shù)據(jù)數(shù)量和用戶數(shù)的增長(zhǎng),對(duì)于基礎(chǔ)設(shè)施的要求也已經(jīng)改變。網(wǎng)站服務(wù)器現(xiàn)在有了緩存 層;數(shù)據(jù)庫需要本地硬盤支持大規(guī)模地并行;數(shù)據(jù)遷移量也超過了本地可處理的數(shù)量。
閃電下載吧:(www.sdbeta.com)提供最新的綠軟分享,游戲輔助工具下載的專業(yè)軟件站點(diǎn),win7 win8 win10 64位百度云下載,最新版免費(fèi)綠色...
w3cplus提供了大量的css,css3,sass,responsive,mobile等最新前端技術(shù)文章、demo及下載資源,以一起學(xué)習(xí)進(jìn)步,共同分享為原則,...
拓爾思長(zhǎng)期專注于大數(shù)據(jù)和人工智能核心尖端技術(shù),是國(guó)內(nèi)優(yōu)秀的人工智能和大數(shù)據(jù)技術(shù)及數(shù)據(jù)服務(wù)提供商。
搜搜吧社區(qū)是聚合百度搜索,搜狗搜索,360搜索,新聞,教育,站長(zhǎng),廣告,娛樂,影視,微信,網(wǎng)盤,營(yíng)銷,手機(jī),汽車,游戲,時(shí)尚,小說,論壇,小組群,上海地區(qū)綜合為...
中國(guó)字體設(shè)計(jì)網(wǎng)分享藝術(shù)字體、創(chuàng)意字體設(shè)計(jì)、字體設(shè)計(jì)圖片,包括中英文藝術(shù)字、書法字體、毛筆字圖片、中英文字體設(shè)計(jì)和標(biāo)志設(shè)計(jì)作品,以及l(fā)ogo設(shè)計(jì)和標(biāo)志征集信息等。
中望軟件是中國(guó)CAD行業(yè)唯一國(guó)家級(jí)重點(diǎn)軟件企業(yè),憑借中望CAD,中望3D CAD/CAM,機(jī)械CAD,建筑CAD,模具CAD,3D打印等解決方案的領(lǐng)先技術(shù),已經(jīng)...