터칭 데이터

하둡 설치 - 맵리듀스 프로그래밍 실행 본문

하둡과 Spark

하둡 설치 - 맵리듀스 프로그래밍 실행

터칭 데이터 2024. 1. 15. 20:47

 

 

하둡 설치와 맵리듀스 프로그래밍 실습


하둡 설치와 맵리듀스 프로그래밍 실습

 

 

 

 

 

 

 

 

하둡 설치

 

하둡 3.0을 의사분산 모드로 리눅스 서버에 설치

의사분산 모드는 Hadoop 관련 프로세스들을 개별 JVM으로 실행
AWS 우분투 EC2 t2.medium 인스턴스 사용
    - 자바 8이 필요. 우분투 설치 문서 참조

 

데모

 

 

 

 

 

 

 

 

 

 

 

 

하둡 웹 UI - HDFS

 

내임노드 (포트번호: 9870)

 

데이터노드 (포트번호: 9864)

 

 

 

 

 

'하둡과 Spark' 카테고리의 다른 글

Spark 소개  (0) 2024.01.15
맵리듀스 프로그래밍 실행  (0) 2024.01.15
맵리듀스 프로그래밍 소개  (0) 2024.01.15
YARN의 동작방식  (0) 2024.01.15
하둡의 등장과 소개  (0) 2024.01.15