EMR에서는 YARN을 통해서 Spark을 구동할 수 있다.
이 때 현재 실행중인 Spark Job을 보고 싶은 경우가 있는데 Web UI를 보고 싶다면
다음과 같은 단계를 거쳐야 한다.
- 터널링하여 Resource Manager 접속
- 해당 job의 ApplicationMaster 링크 클릭
주의
- ResourceManager를 거치지 않으면 이미지가 깨져나온다.
- 따라서 YARN Resource Manager를 거치도록 한다.
'AWS' 카테고리의 다른 글
| [공유] AWS 오픈 가이드 (0) | 2016.10.17 |
|---|---|
| ec2 인스턴스에서 sudo pip이 안되는 경우 (0) | 2016.09.06 |
| CLI에서 원하는 EMR 클러스터 아이디 뽑아내기 (0) | 2016.08.25 |
| CLI에서 JSON 결과에 query를 보내서 원하는 결과만 보기 (0) | 2016.08.25 |
| EMR상에서 Resource Manager 재시작하기 (0) | 2016.03.08 |
| EC2 Compute Unit 이란? (0) | 2015.12.10 |
| EMR 4.2.0에서 zeppelin 포트 변경 (0) | 2015.12.09 |