티스토리 뷰
클라이언트가 하둡으로 실행을 요청하는 맵리듀스 프로그램의 하나의 작업 단위를 잡(job)이라고 합니다.
하둡 클러스터에 등록된 전체 잡의 스케줄링을 관리하고 모니터링을 잡 트래커(job tracker)가 수행합니다.
보통 네임 노드에서 실행하지만 잡트레커를 꼭 네임노드에서 실행할 필요는 없습니다.
태스크 트레커는 사용자가 설정한 맵리듀스 프로그램을 실행합니다. 태스크 트레커는 데이터 노드에서 실행됩니다.
태스크 트레커는 잡 트래커의 작업을 요청받고, 잡 트레커가 요청한 맵과 리듀스 개수만큼 맵 태스트와 리듀스 태스크를 생성 및 실행합니다.
'Hadoop' 카테고리의 다른 글
하둡 설치 및 ssh 설정 순서 (0) | 2018.10.01 |
---|---|
hdfs에 파일 올리기 (0) | 2018.08.14 |
빅데이터 만화 (0) | 2018.08.02 |
YARN에 대해서 (0) | 2018.08.02 |
맵리듀스 개념 정리 (1) | 2018.07.26 |
댓글