하둡과 Spark

하둡 설치 - 맵리듀스 프로그래밍 실행

터칭 데이터 2024. 1. 15. 20:47

 

 

하둡 설치와 맵리듀스 프로그래밍 실습


하둡 설치와 맵리듀스 프로그래밍 실습

 

 

 

 

 

 

 

 

하둡 설치

 

하둡 3.0을 의사분산 모드로 리눅스 서버에 설치

의사분산 모드는 Hadoop 관련 프로세스들을 개별 JVM으로 실행
AWS 우분투 EC2 t2.medium 인스턴스 사용
    - 자바 8이 필요. 우분투 설치 문서 참조

 

데모

 

 

 

 

 

 

 

 

 

 

 

 

하둡 웹 UI - HDFS

 

내임노드 (포트번호: 9870)

 

데이터노드 (포트번호: 9864)