목록Yarn (2)
이야기박스
Hadoop 시리즈. Hadoop3 설치하기 - 기본 설치 이전 포스팅에서 하둡, 특히 HDFS란 무엇인가에 대해서 가볍게 알아보았다면, 이번에는 직접 설치해여 몸으로 하둡을 겪어보려고 합니다. Hadoop 시리즈. HDFS 맛보기 하둡 분산형 파일 시스템 (HDFS; box0830.tistory.com 위 포스팅에 이어서 Yarn을 설치해보도록 하겠습니다. 노드 역할 Yarn story-hadoop-master01 Active Namenode Resource Manager story-hadoop-master02 Standby Namenode Resource Manager (history, timeline) story-hadoop-master03 Observer Namenode story-hadoop-w..
Resource Manager의 조사로 쿠버네티스, 메소스에 이어서 YARN을 하게 되었습니다. 하둡을 가끔씩 사용하면서도 YARN의 구조를 제대로 파악하지 못하고 있었는데, 이번 기회에 공부할 수 있게 되었네요. YARN은 Hadoop2에 등장한 Resource Management, 즉 리소스 관리 플랫폼이라 할 수 있습니다. 그래서 표지도 Apache Hadoop으로 하였습니다 ㅎㅎ # 하둡 구성 먼저 하둡에 대해서 간단하게 이야기하고 넘어가야 할 것 같습니다. 하둡은 분산 환경에서 빅 데이터를 저장하고 처리할 수 있는 자바 기반의 오픈 소스 프레임 워크입니다. 정말로 많은 곳에서 사용되고 있습니다. 요새 많이 사용되고 있는 Hadoop 2.0 대표적 특징은 아래와 같습니다. HDFS(Hadoop D..