原創文章,轉載請注明出處 http://qingtangpaomian.iteye.comhttp://go.rritw.com//blog/1671305

 

1. 寫在前面

Ambari是Apache的一個開源項目,旨在提供一個Hadoop集群安裝、管理、配置、監控的一體化工具。Ambari使用了開源項目hmc完成hadoop的安裝功能 , 在監控方面則使用了ganglia和nagios兩個開源項目。

本人在安裝ambari的過程中遇到了種種問題,特別寫博客記錄下來,给大家参考。

注意 :本文當中的所有操作,建議以root账戶執行。

 

 

2. Ambari安裝

2.1 Step1 - 獲取Ambari

1. 從SVN獲取代碼

# svn checkout http://svn.apache.org/repos/asf/incubator/ambari/trunk ambari

2. 將源代碼打包为rpm包

使用rpm打包工具將ambari源代碼打包 : 

# yum install rpm-build
# cd hmc/package/rpm
# ./create_hmc_rpm.sh
# cd mon_dashboard/package/rpm
# ./create_dashboard_rpm.sh

注意 : 這些步驟執行完成後,會在下面的路徑中發現對應的rpm包,這些包就是ambari各組件對應的安裝包。

1) hmc/package/rpm/build/rpmbuild/RPMS/noarch/ambari-1.0.0-1.noarch.rpm

2) hmc/package/rpm/build/rpmbuild/RPMS/noarch/ambari-agent-1.0.0-1.noarch.rpm

3) mon_dashboard/package/rpm/build/rpmbuild/RPMS/noarch/hdp_mon_dashboard-0.0.1-2.noarch.rpm

 

2.2 Step2 - 安裝Ambari Master Server

注意 : Ambari使用的是master - slaver 的這種結構,在集群中有一個節點作为master server節點,而其他節點作为slaver,聽從master節點的調度。在安裝之前,需要讀者對從集群當中選擇一個節點作为ambari master節點。

1. 安裝前的准備

在安裝ambari之前,需要做一下兩件事情

1) : 配置Ambari Master到其他所有Slaver的 password-less SSH(参考以下內容)

 

1.  Run on ambary master: % ssh-keygen -t dsa

2.  Copy pubkey to each nodes:
Scp ~/.ssh/id_dsa.pub  root@<each node IP>:/.ssh/authorized_keys

3.  Back up id_dsa, this will be as private key when you want to launch Ambari install Hadoop clusters.

Note: you might need create .ssh folder on each node manually.

 2) : 關閉防火牆

# service iptables stop

2. 安裝Ambari Server依賴模塊

注意 : Ambari server對puppet , ruby , passenger , httpd等模塊有依賴,所以在安裝ambari server需要先安裝依賴模塊。

a. 先在本機添加yum倉庫,包括redhat, hontworks以及passenger的倉庫 :

$ rpm -Uvh http://dl.fedoraproject.org/pub/epel/5/x86_64/epel-release-5-4.noarch.rpm

    如果是i386則執行以下操作:

# rpm -Uvh http://dl.fedoraproject.org/pub/epel/5/i386/epel-release-5-4.noarch.rpm
# rpm -Uvh http://passenger.stealthymonkeys.com/rhel/5/passenger-release.noarch.rpm
# rpm -Uvh http://public-repo-1.hortonworks.com/HDP-1.0.1.14/repos/centos5/hdp-release-1.0.1.14-1.el5.noarch.rpm

b. 安裝php模塊

# yum install php-pecl-json  # version 1.2.1 compatible with php-5.1 or php-5.2
#  yum install php-pdo
#  php -m | grep posix

 如果posix模塊沒有找到,則執行以下操作

# yum install php-process

c. 執行以下操作,安裝Ambari master主要依賴

# yum install pdsh
#  yum install httpd-devel
#  yum install mod_passenger
#  yum install puppet-2.7.9
#  yum install ruby-devel

3. 安裝Ambari master

# rpm -iv ambari-1.0.0-1.noarch.rpm 
#  rpm -iv hdp_mon_dashboard-0.0.1-2.noarch.rpm

 

2.3 Step3 - 安裝Ambari Agent

1. 安裝依賴(這裏同Ambari Server完全相同)

a. 先在本機添加yum倉庫,包括redhat, hontworks以及passenger的倉庫 :

# rpm -Uvh http://dl.fedoraproject.org/pub/epel/5/x86_64/epel-release-5-4.noarch.rpm

    如果是i386則執行以下操作:

# rpm -Uvh http://dl.fedoraproject.org/pub/epel/5/i386/epel-release-5-4.noarch.rpm
# rpm -Uvh http://passenger.stealthymonkeys.com/rhel/5/passenger-release.noarch.rpm
# rpm -Uvh http://public-repo-1.hortonworks.com/HDP-1.0.1.14/repos/centos5/hdp-release-1.0.1.14-1.el5.noarch.rpm

b. 安裝php模塊

# yum install php-pecl-json # version 1.2.1 compatible with php-5.1 or php-5.2
# yum install php-pdo
# php -m | grep posix

 如果posix模塊沒有找到,則執行以下操作

# yum install php-process

c. 執行以下操作,安裝Ambari 主要依賴

# yum install pdsh
# yum install httpd-devel
# yum install mod_passenger
# yum install puppet-2.7.9
# yum install ruby-devel

2. 安裝Ambari Agent

# rpm -Uvh ambari-agent-1.0.0-1.noarch.rpm

 

 

2.4 Step4 - 启動Ambari

1. 启動Ambari Server

a) 從網址 http://go.rritw.com/www.oracle.com/technetwork/java/javase/downloads/jdk-6u26-download-400750.html 下載以下的三個文件,拷貝到ambari master所在機器的路徑/var/run/hmc/downloads/ 下

1) jdk-6u26-linux-x64.bin

2) jdk-6u26-linux-i586.bin

3) jce_policy-6.zip

b) 启動Ambari Master

# service ambari start

2. 启動Ambari Agent

# service ambari-agent start

3. 從Web界面訪問Ambari服務

搭建完成Ambari服務後,就可以通過以下Web地址訪問Ambari服務 http://AMBARIMASTER/hmc/html/,如果能夠成功訪問,則搭建成功。


From:ITEYE        

 




創作者介紹
創作者 shadow 的頭像
shadow

資訊園

shadow 發表在 痞客邦 留言(0) 人氣()