실무로 배우는 빅데이터 기술-01 (with.분석인프라)

Beginning

우여꼭절 끝에 얻어낸 ftp 설정과 파이썬3 버전 설치

→ 실무로 배우는 빅데이터 기술을 실습해보기로 했다.

해당 서적에서는 가상환경에서 실행했지만 Cent OS 기반으로 구성된 인프라가 있으니 거기서 실행하도록 한다.

실습 예외 부분

1. centos의 x-window 부팅을 해제하여 콘솔에 바로 아이디/패스워드 입력창이 나타난다.Password : adminuser ↔ 비밀번호 입력id 5 : initdefault: ↔ 5부분을 3으로 수정한다.
2. reboot ↔ 재시작한다.
3. vi /etc/inittab ↔ etc하위의 inittab을 vi 편집기로 수정한다.
4. su root ↔ root로 전환
5. 고정 ip와 네트워크 설정 HWADDR 설정 값은 다 다르게 입력해야할 값으로 가상머신의 MAC 주소이다.
6. DEVICE=eth0 HWADDR=08:00:27:97:F1:13 TYPE=Ethernet ONBOOT=yes BOOTPROTO=static IPADADDR=192.168.56.101 NETMASK=255.255.255.0 GATEWAY=192.168.56.1 NETWORK=192.168.56.0
7. 버츄얼박스에서 설정→네트워크→어댑터2 에서 나온 MAC 주소 값을 두 자리숫자 단위로 잘라서 : 를 구분값으로 입력한다.
8. vi /etc/sysconfig/network-scripts/ifcfg-eth0 ↔ 이전에는 수정이었다면 ifcfg-eth0 파일을 생성한다.
9. 자동으로 만들어진 네트워크 룰을 모두 주석처리 또는 삭제처리하여 향후 발생할 수 있는 네트워크 충돌을 방지#PCI device 밑을 다 주석처리.
10. vi etc/udev/rules.d/70-;erskstent-net.rules
11. 재시작후 제대로 설정되었는지 확인
12. service network restart → ifconfig eh0

실습 시작

현재 ssh로 서버를 접속한 상태이다. 하지만 해당 컨테이너를 구축한지 너무 오래되어 설치된 패키지도 제대로 되어있지 않을 확률이 높다. 따라서 ssh 접속부터 시작한다.

1. ssh 접속을 위한 패키지 설치

yum install openssh*

service sshd restart

chkconfig sshd on

reboot

는… service network restart 했더니 네트워크 에러 : 커넥션 타임아웃

<재시작되는데 5분이 걸렸다.>

2. 호스트 정보를 수정

vi /etc/hosts

vi /etc/sysconfig/network

호스트네임에 server이름.hadoop.com

는… 이책은 하둡을 하는 거고..

서버 하나로 하둡을 못하겠구나 깨달았다.

centos 다운받고 버츄얼로 다시 실행하도록 하겠다.