Hadoop

hadoop namenode的理想實例類型是什麼

  • January 3, 2012

對於一個相對較小的 1 TB 集群(複製後實際為 2TB),我試圖確定 namenode 的理想記憶體/cpu 大小是多少,作為最終使用者使用 hadoop 時我無法想像它是太瘋狂了……但Google搜尋hadoop最低要求沒有給出任何明確的答案,甚至沒有推薦的伺服器設置。

這將更多地取決於您在 HDFS 中有多少文件。經驗法則是,namenode 程序本身在 DFS 中保存的每一百萬個對象(文件、目錄、塊)需要大約 1GB 的記憶體。CPU 需求應該是微不足道的。

https://twiki.grid.iu.edu/bin/view/Storage/HadoopUnderstanding對其中一些需要考慮的事項進行了不錯的概述。

引用自:https://serverfault.com/questions/319923