隨著Apache Hadoop的起步,云客戶的增多面臨的首要問題就是如何為他們新的的Hadoop集群選擇合適的硬件。
盡管Hadoop被設(shè)計為運行在行業(yè)標(biāo)準的硬件上,提出一個理想的集群配置不想提供硬件規(guī)格列表那么簡單。 選擇硬件,為給定的負載在性能和經(jīng)濟性提供最佳平衡是需要測試和驗證其有效性。(比如,IO密集型工作負載的用戶將會為每個核心主軸投資更多)。
在這個博客帖子中,你將會學(xué)到一些工作負載評估的原則和它在硬件選擇中起著至關(guān)重要的作用。在這個過程中,你也將學(xué)到Hadoop管理員應(yīng)該考慮到各種因素。
結(jié)合存儲和計算
過去的十年,IT組織已經(jīng)標(biāo)準化了刀片服務(wù)器和存儲區(qū)域網(wǎng)(SAN)來滿足聯(lián)網(wǎng)和處理密集型的工作負載。盡管這個模型對于一些方面的標(biāo)準程序是有相當(dāng)意義 的,比如網(wǎng)站服務(wù)器,程序服務(wù)器,小型結(jié)構(gòu)化數(shù)據(jù)庫,數(shù)據(jù)移動等,但隨著數(shù)據(jù)數(shù)量和用戶數(shù)的增長,對于基礎(chǔ)設(shè)施的要求也已經(jīng)改變。網(wǎng)站服務(wù)器現(xiàn)在有了緩存 層;數(shù)據(jù)庫需要本地硬盤支持大規(guī)模地并行;數(shù)據(jù)遷移量也超過了本地可處理的數(shù)量。
艾瑞網(wǎng)聚合互聯(lián)網(wǎng)數(shù)據(jù)資訊,融合互聯(lián)網(wǎng)行業(yè)資源,提供電子商務(wù)、移動互聯(lián)網(wǎng)、網(wǎng)絡(luò)游戲、網(wǎng)絡(luò)廣告、網(wǎng)絡(luò)營銷等行業(yè)內(nèi)容,為互聯(lián)網(wǎng)管理營銷市場運營人士提供豐富的產(chǎn)業(yè)數(shù)據(jù)、...
菜鳥圖庫專業(yè)為你分享各種免費圖庫、模板素材、素材免費下載服務(wù),包括PSD素材、攝影圖片、辦公ppt、矢量素材等。
電腦公司系統(tǒng)網(wǎng)免費提供綠色安全的手機應(yīng)用下載,包含熱門手機軟件、安卓游戲、電腦軟件等。
遠控網(wǎng)是國內(nèi)最專業(yè)的遠程控制軟件,遠程監(jiān)控軟件的門戶網(wǎng)站。提供最新最全遠程控制軟件,遠程監(jiān)控軟件下載,遠程桌面連接、遠程醫(yī)療、遠程教育、遠程辦公,遠程開機、工控...
科技資訊網(wǎng)致力于提供最快捷、最鮮活的互聯(lián)網(wǎng)行業(yè)即時報道行業(yè)重大事件,重點解讀產(chǎn)業(yè)背后。
極點是一款免費的多功能五筆拼音輸入軟件。完美支持一筆、二筆等各種“型碼”及“音型碼”輸入法。