티스토리 뷰

Hadoop

job tracker와 task tracker에 대해서

선비마을송 2018. 8. 13. 16:47

클라이언트가 하둡으로 실행을 요청하는 맵리듀스 프로그램의 하나의 작업 단위를 잡(job)이라고 합니다. 

하둡 클러스터에 등록된 전체 잡의 스케줄링을 관리하고 모니터링을 잡 트래커(job tracker)가 수행합니다. 

보통 네임 노드에서 실행하지만 잡트레커를 꼭 네임노드에서 실행할 필요는 없습니다. 


태스크 트레커는 사용자가 설정한 맵리듀스 프로그램을 실행합니다. 태스크 트레커는 데이터 노드에서 실행됩니다. 

태스크 트레커는 잡 트래커의 작업을 요청받고, 잡 트레커가 요청한 맵과 리듀스 개수만큼 맵 태스트와 리듀스 태스크를 생성 및 실행합니다.





 

'Hadoop' 카테고리의 다른 글

하둡 설치 및 ssh 설정 순서  (0) 2018.10.01
hdfs에 파일 올리기  (0) 2018.08.14
빅데이터 만화  (0) 2018.08.02
YARN에 대해서  (0) 2018.08.02
맵리듀스 개념 정리  (1) 2018.07.26
댓글
공지사항
최근에 올라온 글
최근에 달린 댓글
Total
Today
Yesterday
링크
TAG
more
«   2024/05   »
1 2 3 4
5 6 7 8 9 10 11
12 13 14 15 16 17 18
19 20 21 22 23 24 25
26 27 28 29 30 31
글 보관함