EMR 상에서 Spark Web UI를 보고 싶은 경우

EMR에서는 YARN을 통해서 Spark을 구동할 수 있다.

이 때 현재 실행중인 Spark Job을 보고 싶은 경우가 있는데 Web UI를 보고 싶다면

다음과 같은 단계를 거쳐야 한다.

• 터널링하여 Resource Manager 접속
• 해당 job의 ApplicationMaster 링크 클릭

주의

• ResourceManager를 거치지 않으면 이미지가 깨져나온다.
• 따라서 YARN Resource Manager를 거치도록 한다.