Hadoop 개발환경 구축 (1)
# Hadoop 다운로드
Hadoop 다운로드 받는 방법은 사이트에 접속하여 다운받는 방법과 서버에서 wget을 통해 직접 다운로드 받는 방법이 있다.
1번은 사이트에서 받는 방법, 2번은 서버에서 직접받는 방법.
둘 중에 원하는 방법으로 다운르도 받으면 된다.
1.1 하둡 다운로드 받기 (미러 사이트)
하둡 다운로드는 아파치 재단의 미러 사이트들에서 할 수 있다.
1.2 하둡 다운로드 받기 (아카이브 사이트)
미러 사이트에는 주기적으로 최신 버전으로 바뀌므로 이전 버전의 경우 아래 아카이브 사이트에서 다운로드 받는다.
아래 이미지처럼 버전별로 다운로드 받을 수 있다.
하둡을 윈도우 환경에 설치하는 것은 쉽지 않고, 윈도우용은 현재 개발용으로만 권장될 뿐 프로덕션용으로는 권장되지 않는다고 한다.
따라서 필자는 리눅스 버전을 설치하기로 한다.
하둡의 여러 버전들 중에 1.0.3 버전을 설치하기로 한다.
아래 .gz 파일을 다운로드 받고 개발환경을 구축하고자 하는 리눅스 서버에 업로드 한다.
설치 버전 : hadoop-1.0.3.tar.gz |
2 하둡 다운로드 받기 (wget을 이용한)
Step 1. 다운로드 받을 경로 확인
- HADOOP_HOME 환경변수 설정할 때 사용
[wonjongkyu@wisenut245 install]$ pwd /home/wonjongkyu/install [wonjongkyu@wisenut245 install]$
Step 2. wget 명령을 이용하여 hadoop-1.0.3.tar.gz 파일 다운로드
[wonjongkyu@wisenut245 install]$ wget http://archive.apache.org/dist/hadoop/core/hadoop-1.0.3/hadoop-1.0.3.tar.gz --2016-07-28 09:26:32-- http://archive.apache.org/dist/hadoop/core/hadoop-1.0.3/hadoop-1.0.3.tar.gz Resolving archive.apache.org... 163.172.17.199 Connecting to archive.apache.org|163.172.17.199|:80... connected. HTTP request sent, awaiting response... 200 OK Length: 62428860 (60M) [application/x-gzip] Saving to: `hadoop-1.0.3.tar.gz' 100%[==============================================================>] 62,428,860 4.57M/s in 16s 2016-07-28 09:26:49 (3.65 MB/s) - `hadoop-1.0.3.tar.gz' saved [62428860/62428860] [wonjongkyu@wisenut245 install]$
