데이터 이야기

YARN ResourceManager 아키텍처 1. 클라이언트간의 상호 작용 1) ClientService 리소스매니저의 클라이언트 인터페이스 Client에서 ResourceManager로 향하는 모든 RPC통신을 처리하는 인터페이스 애플리케이션 제출/ 종료 애플리케이션과 queue, 클러스터 통계, 사용자 ACL, 보안 정보 제공 2) AdminService YARN의 클러스터 관리자는 종종 실행해야할 목록이 있음 이 관리 요청이 일반 사용자의 빈번한 요청때문에 서비스를 받지 못하는...

NodeManger의 핵심 기능 1. 컨테이너 시작 컨테이너 시작을 가능하게 하기 위해서 NM은 컨테이너 명세의 일부로서 컨테이너의 실행시간에 대한 자세한 정보를 수신하기를 기대 이 정보는 컨테이너의 커맨드 라인 명령, 환경 변수, 컨테이너가 필요로 하는 (파일) 리소스들의 목록과 보안 토큰을 포함 컨테이너시작 요청을 받게 되었을 때 보안이 활성화 되어 있다면, NM은 먼저...