Cluster 2

2-3. 하둡의 실행-2

Fully distributed(완전분산) 모드에 대해서 알아보자. 3. Fully distributed(완전 분산) 모드 지금버터는 모든 기능이 갖추어진 클러스터를 구성한다. 구성은 다음과 같다. 1. master - 클러스터의 master 노드로서, NameNode와 JobTracker 데몬을 제공한다.2. backup - SNN(Secondary NameNode 데몬)을 제공하는 서버3. hadoop1, hadoop2, hadoop3 - DataNode와 TaskTracker 데몬을 실행하는 slave Master 노드에서 하둡의 환경 설정 파일(3개의 xml)을 아래와 같이 수정하자. - core-site.xml 이 부분은 파일 시스템을 설정해주기 위한 부분이다. - mapred-site.xml ..

Experiences/Hadoop 2012.09.05

2-1. 하둡의 구성요소

이번 파트에서는 하둡의 물리적 컴포넌트에 대해 설명하고, 클러스터의 구축에 대해 설명하려고 한다.또한 하둡의 세 가지 실행모드를 자세히 다룬다.마지막으로 사용자의 클러스터를 모니터링 하기 위한 웹 기반 도구에 대해 공부한다. 하둡을 실행한다는 것은 네트워크상의 서로 다른 서버에서 여러 개의 데몬(daemon) 또는 상주 프로그램들을 실행 한다는 것을 뜻한다. 이러한 데몬은 특별한 역할을 한다.하둡의 데몬의 종류는 다음과 같은 것들이 있다. - NameNode- DataNode- Secondary NameNode- JobTracker- TaskTracker 각각에 대해서 알아보자! 1. NameNode 가장 필수적인 하둡 데몬은 NameNode이다.하둡은 분산 저장과 분산 연산에 대해 master/slav..

Experiences/Hadoop 2012.08.29