Miner

Spark(4) - Install Hadoop 본문

데이터 엔지니어링/Spark

Spark(4) - Install Hadoop

MineTime76 2024. 1. 22. 23:28

하둡 설치

하둡 3.0을 의사분산 모드로 리눅스 서버에 설치

의사분산 모드 : 1개 resource manager, 1개 Node manager

  • 의사분산 모드는 Hadoop 관련 프로세스들을 개별 JVM으로 실행
  • AWS 우분투 EC2 t2.medium 인스턴스 사용
    • 자바 8이 필요. 우분투 설치 문서
  • 데모  
저작자표시 비영리 변경금지

'데이터 엔지니어링 > Spark' 카테고리의 다른 글

Spark(6) - Spark 사용  (0) 2024.01.30
Spark(5) - Spark  (0) 2024.01.30
Spark(3) - MapReduce 프로그래밍  (0) 2024.01.22
Spark(2) - Yarn  (0) 2024.01.22
Spark(1)  (0) 2024.01.22
'데이터 엔지니어링/Spark' Related Articles more