1.配置Linux 进入 /opt目录下
2.下载上传下载工具(Linux系统简单易用的上传下载命令rz和sz)
lrzsz是Linux CentOS内置的一个上传下载工具
安装方法 yum install lrzsz -y
测试 需要下载xshell / SecureCRT 客户端工具
<1>上传命令: rz
<2>下载命名: sz
3.下载cloudera-manager-installer.bin进行 Cloudera Manager and CDH安装及配置
使用cloudera-manager(CM)的bin包安装校验cm。可以进入
archive.cloudera.com/cm5/installer/latest/,
然后选择cloudera-manager-installer.bin进行下载。
4.上传cloudera-manager-installer.bin 到/opt目录下
5.执行cloudera-manager-installer.bin 前的准备
7、删除各个主机上自带的JDK
查找安装的JDK命令
rpm -qa |grep gcj
rpm -qa |grep jdk
rpm -qa |grep java
删除安装的JDK相关的命令,例如:
yum -y remove jdk-1.6.0_31-fcs.x86_64
8、配置各个主机上的/etc/hosts
192.168.1.101 mater
192.168.1.102 slave1
192.168.1.103 slave2
注意:还要在每个主机上配置好主机 ip localhost 这一项。
一般是将其加入到iptables中,当然也可以选择关闭。
关闭防火墙:
在root下执行下面命令,可以临时关闭防火墙
service iptables stop
在root下执行下面命令,可以永久关闭防火墙(即,每次开机都会关闭),但需要重启生效。
chkconfig iptables off
9、关闭SELinux:
$ setenforce 0
要关掉selinux,首先要查看它是否运行。
在终端输入/usr/sbin/sestatus -v
SELinux status: enabled就是开启的;disabled 就是关闭
如果需要永久关闭,编辑/etc/selinux/config ,设置SELINUX=disabled
,然后完成安装,需要重启 (reboot)
。如未关闭,则会出现如下错误:
如果安装过程中,由于某种原因中断,再次安装的时候需要进行清理。
清理步骤请参考:使用Parcles安装后卸载Cloudera Manager Free Edition
如果安装过程中,由于某种原因中断,再次安装的时候需要进行清理。
清理步骤请参考:使用Parcles安装后卸载Cloudera Manager Free Edition
10、更改Cloudera-manager-installer.bin权限,使其可执行
$ chmod u+x cloudera-manager-installer.bin
$ ./cloudera-manager-installer.bin
接着,接受许可协议,按Enter和Next,
安装界面如下所示:
等待安装完成即可,由于下载的文件较大,网络不好的情况下会出现静止很久的情况,所以要耐心等待。如果一直停留在20%、40%、70%,过来好久都没有变化,这时候需要用Ctrl+C中断安装,执行清理后,重新执行安装命令。
二、启动 Cloudera Manager Admin 控制台
通过Cloudera Manager Admin控制台,可以配置、管理、监控集群上的Hadoop,WEB端的URL地址是:http://myhost.example.com:7180,myhost.example.com是你安装Cloudera-Manager-installer.bin的主机域名,当然用IP也是可以的。例如我的WEB端URL地址就是:http://192.168.1.101:7180 。
通常Cloudera Manager Admin控制台启动不起来有以下可能:
service cloudera-scm-server-db 是否启动
service cloudera-scm-server 是否启动
service httpd 是否启动
3、使用Cloudera Manager自动安装CDH和配置
注意:扫描IP主机找不到,通常是由于防火墙或者是SELinux的问题
安装可以联网安装,可以创建自己的yum库,然后通过该yum库来安装。
本地yum库的搭建,请参考:
选择从parcel安装,分布式的解压的默认存储在/opt/cloudera/下面。