Hadoop快速部署工具 EasyHadoop

fmms 12年前發布 | 48K 次閱讀 Hadoop 分布式/云計算/大數據

EasyHadoop 是一個Hadoop一鍵安裝腳本,方便大家更容易安裝部署Hadoop軟件。

EasyHadoop 源自暴風影音Hadoop數據平臺項目而來,由暴風影音數據團隊修湘同學調研,并由向磊同學編寫。

本著從來源中來,到開源中去,并回饋開源社區的回饋思想。

開放此腳本方便大家安裝使用,以此和行業共同學習進步。

支持特性如下:

1.Haoop 穩定版本 hadoop-0.20.203

2.集成 JDK 6

3.集成LZO,hadoop-gpl-packaging-0.2.8-1

4.支持 配置輸入 map槽 reduce槽 單個槽memory

5.支持64位 linux 操作系統. 特別是 redhat centos

6.集成 hive-0.7.1,支持Lzo讀取

7.集成 pig,支持Lzo讀取

使用方法:

wget http://www.easyhadoop.com/EasyHadoop_v1.0.sh
chmod +x EasyHadoop_v1.0.sh
./EasyHadoop_v1.0.sh 6 2 512
使用說明:
./EasyHadoop_v1.0.sh map.tasks.maximum[map槽] reduce.tasks.maximum[reduce槽] memory[單個槽memory]

項目主頁：http://www.baiduhome.net/lib/view/home/1329661928811

 本文由用戶 fmms 自行上傳分享，僅供網友學習交流。所有權歸原作者，若您的權利被侵害，請聯系管理員。
 轉載本站原創文章，請注明出處，并保留原始鏈接、圖片水印。
 本站是一個以用戶分享為主的開源技術平臺，歡迎各類分享！