Hadoop

ubuntu 14.04.2 에 Cloudera 5.8 설치 출처: http://mcha.tistory.com/?page=12 [Hello, IT]

후추맛 2018. 8. 10. 21:07

== ubuntu 3대 설치

== 고정 ip 설정

http://ismydream.tistory.com/99

sudo vi /etc/network/interfaces

iface eth0 inet static

address 192.168.1.101

netmask 255.255.255.0

gateway 192.168.1.1

dns-nameservers 8.8.8.8 8.8.4.4


== IP 설정 적용. 원격작업시 주의. ifdown하면 연결 끊어짐.

sudo ifdown eth0

sudo ifup eth0

cat /etc/resolv.conf


== 설정

sudo vi /etc/sysctl.conf

다음을 추가. swap 최대한 사용하지 않도록

vm.swappiness=0

재시작시 적용

즉시 적용을 위해 다음의 값을 수정 하면 됨.

/proc/sys/vm/swappiness 


== 사용 계정에 sudo 암호 물어보지 않도록 하기. 

http://stackoverflow.com/questions/28171755/cloudera-installation-failed-to-detect-root-privileges-on-centos

sudo vi /etc/sudoers

추가

feisia ALL =(ALL) NOPASSWD: ALL



== host 등록

sudo vi /etc/hosts

자기 호스트명과 다른 노드의 호스트명 등록

#127.0.1.1 자기 호스트명 주석

192.168.219.51 ubuntu01

192.168.219.52 ubuntu02

192.168.219.53 ubuntu03


== CM 설치

http://www.cloudera.com/downloads/manager/5-8-1.html

wget http://archive.cloudera.com/cm5/installer/latest/cloudera-manager-installer.bin

chmod u+x cloudera-manager-installer.bin

sudo ./cloudera-manager-installer.bin


== repository 추가

http://www.cloudera.com/documentation/enterprise/latest/topics/cm_ig_install_path_b.html

sudo wget https://archive.cloudera.com/cm5/ubuntu/trusty/amd64/cm/cloudera.list

sudo cp cloudera.list /etc/apt/sources.list.d/

sudo apt-get update


== web으로 CM 접속 후 구성

http://192.168.219.51:7180/




== 기타

#cloudera manager 서비스 중지하기

service cloudera-scm-server stop