Interstellar
Hadoop Ecosystem - Architecture
Hadoop [ 데이터 분산 저장 및 처리 플랫폼 ] HDFS : 데이터 저장, Fault-tolerance YARN : 작업 스케쥴링, 자원 관리 Master Node : 작업 관리 감독 Slave Node : 작업 수행 Hadoop Daemons Name Node (on Master) : 데이터 분산 저장 방법 관리 Fsimage : 파일 시스템 스냅샷 Edits : 파일 변경 로그 Data Node (on Slave) : 데이터 저장 및 관리 YARN Daemons Resource Manager (on Master, 1 per Cluster) : Container 생성, Heartbeats 추적, Cluster-level 보안 관리 Node Manager (on Slave, 1 per Node) :..
Big Data
2019. 5. 15. 14:17