[s3] Amazon EMR 애플리케이션이 실패하고 HTTP 403 ‘액세스 거부’ AmazonS3Exception 오류가 발생하는 이유가 무엇인가요?

S3 write 권한을 준다음

s3://abc/def/

 

zeppelin spark interpreter 를

spark.yarn.stagingDir = s3://abc/def/ 로 지정하는 경우

403 에러가 발생한다..

 

권한을 준 s3://abc/def/123 처럼 하위 디렉터리로 설정하면

이 문제를 해결 할 수 있다.

 

아마도 zeppein spark interpreter 설정에서

/ slash 를 제거하여 동작하기 때문이지 않을까 싶다..

 

https://repost.aws/ko/knowledge-center/emr-s3-403-access-denied

Amazon EMR에서 HTTP 403 "액세스가 거부됨" AmazonS3Exception 문제 해결 | AWS re:Post