<rt id="bn8ez"></rt>
<label id="bn8ez"></label>

  • <span id="bn8ez"></span>

    <label id="bn8ez"><meter id="bn8ez"></meter></label>

    paulwong

    HBASE部署要點(diǎn)

    REGIONS SERVER和TASK TRACKER SERVER不要在同一臺機(jī)器上,最好如果有MAPREDUCE JOB運(yùn)行的話,應(yīng)該分開兩個CLUSTER,即兩群不同的服務(wù)器上,這樣MAPREDUCE 的線下負(fù)載不會影響到SCANER這些線上負(fù)載。

    如果主要是做MAPREDUCE JOB的話,將REGIONS SERVER和TASK TRACKER SERVER放在一起是可以的。


    原始集群模式

    10個或以下節(jié)點(diǎn),無MAPREDUCE JOB,主要用于低延遲的訪問。每個節(jié)點(diǎn)上的配置為:CPU4-6CORE,內(nèi)存24-32G,4個SATA硬盤。Hadoop NameNode, JobTracker, HBase Master, 和ZooKeeper全都在同一個NODE上。


    小型集群模式(10-20臺服務(wù)器)

    HBase Master放在單獨(dú)一臺機(jī)器上, 以便于使用較低配置的機(jī)器。ZooKeeper也放在單獨(dú)一臺機(jī)器上,NameNode和JobTracker放在同一臺機(jī)器上。

    中型集群模式(20-50臺服務(wù)器)

    由于無須再節(jié)省費(fèi)用,可以將HBase Master和ZooKeeper放在同一臺機(jī)器上, ZooKeeper和HBase Master要三個實(shí)例。NameNode和JobTracker放在同一臺機(jī)器上。

    大型集群模式(>50臺服務(wù)器)

    和中型集群模式相似,但ZooKeeper和HBase Master要五個實(shí)例。NameNode和Second NameNode要有足夠大的內(nèi)存。

    HADOOP MASTER節(jié)點(diǎn)

    NameNode和Second NameNode服務(wù)器配置要求:(小型)8CORE CPU,16G內(nèi)存,1G網(wǎng)卡和SATA 硬盤,中弄再增加多16G內(nèi)存,大型則再增加多32G內(nèi)存。

    HBASE MASTER節(jié)點(diǎn)

    服務(wù)器配置要求:4CORE CPU,8-16G內(nèi)存,1G網(wǎng)卡和2個SATA 硬盤,一個用于操作系統(tǒng),另一個用于HBASE MASTER LOGS。

    HADOOP DATA NODES和HBASE REGION SERVER節(jié)點(diǎn)

    DATA NODE和REGION SERVER應(yīng)在同一臺服務(wù)器上,且不應(yīng)該和TASK TRACKER在一起。服務(wù)器配置要求:8-12CORE CPU,24-32G內(nèi)存,1G網(wǎng)卡和12*1TB SATA 硬盤,一個用于操作系統(tǒng),另一個用于HBASE MASTER LOGS。

    ZOOPKEEPERS節(jié)點(diǎn)

    服務(wù)器配置和HBASE MASTER相似,也可以與HBASE MASTER放在一起,但就要多增加一個硬盤單獨(dú)給ZOOPKEEPER使用。

    安裝各節(jié)點(diǎn)

    JVM配置:
    -Xmx8g—設(shè)置HEAP的最大值到8G,不建議設(shè)到15 GB.
    -Xms8g—設(shè)置HEAP的最小值到8GS.
    -Xmn128m—設(shè)置新生代的值到128 MB,默認(rèn)值太小。
    -XX:+UseParNewGC—設(shè)置對于新生代的垃圾回收器類型,這種類型是會停止JAVA進(jìn)程,然后再進(jìn)行回收的,但由于新生代體積比較小,持續(xù)時間通常只有幾毫秒,因此可以接受。
    -XX:+UseConcMarkSweepGC—設(shè)置老生代的垃圾回收類型,如果用新生代的那個會不合適,即會導(dǎo)致JAVA進(jìn)程停止的時間太長,用這種不會停止JAVA進(jìn)程,而是在JAVA進(jìn)程運(yùn)行的同時,并行的進(jìn)行回收。
    -XX:CMSInitiatingOccupancyFraction—設(shè)置CMS回收器運(yùn)行的頻率。




    posted on 2013-02-04 12:10 paulwong 閱讀(1247) 評論(0)  編輯  收藏 所屬分類: 分布式HADOOP 、云計算 、HBASE

    主站蜘蛛池模板: 91av免费观看| 91免费福利视频| 色多多www视频在线观看免费| 日韩一区二区三区免费播放| 一出一进一爽一粗一大视频免费的| 成在线人视频免费视频| 无码国产精品一区二区免费3p| 性短视频在线观看免费不卡流畅| 成年女人毛片免费观看97| 又粗又大又硬又爽的免费视频| 久久国产成人精品国产成人亚洲 | 成人毛片18岁女人毛片免费看| 无码国模国产在线观看免费| 国产黄色一级毛片亚洲黄片大全| 亚洲好看的理论片电影| 亚洲 暴爽 AV人人爽日日碰| 亚州**色毛片免费观看| 99久9在线|免费| 韩国欧洲一级毛片免费| 中文字幕在亚洲第一在线| 亚洲成a人片在线观看中文!!!| 久久久久亚洲国产AV麻豆| a级毛片免费高清毛片视频| 无码精品A∨在线观看免费| 亚洲精品无码专区2| 亚洲熟妇无码久久精品| 美女的胸又黄又www网站免费| 你懂的免费在线观看网站| 午夜男人一级毛片免费| 亚洲VA成无码人在线观看天堂| 亚洲中文无码mv| 最新亚洲成av人免费看| 成人奭片免费观看| 亚洲欧洲日产国码无码久久99| 亚洲首页国产精品丝袜| 毛片基地看看成人免费| 黄瓜视频高清在线看免费下载| 国产亚洲日韩一区二区三区| 亚洲成人激情小说| 三级网站在线免费观看| 国产国产成年年人免费看片|