목숨건데이터엔지니어
foot-data-engineering
목숨건데이터엔지니어
전체 방문자
오늘
어제
  • 분류 전체보기 (54)
    • 취업과 기본기 잡기 (11)
      • Python (2)
      • 자료구조 (1)
      • 알고리즘 (1)
      • 운영체제 (2)
      • 네크워크 (1)
      • 데이터베이스 (1)
      • SQL (1)
      • Linux (1)
      • Docker (1)
    • 더 나은 엔지니어가 되기위해 (11)
      • (AWS) api-gateway, kinesis (1)
      • (AWS) MWAA (1)
      • Apache Spark (1)
      • Apache Airflow (1)
      • Apache Kafka (1)
      • Apache Flink (1)
      • Hadoop (1)
      • 알쓸신잡 (4)
    • 데이터와 손잡기 (6)
      • 머신러닝(sklearn) (1)
      • 딥러닝 (3)
      • 오디오 처리 (1)
      • 데이터 시각화 (1)
    • 코딩테스트 잡기 (1)
      • [BOJ] 문제풀이 (0)
      • [프로그래머스] 문제풀이 (0)
      • [HackerRank] SQL (0)
      • 코딩테스트 후기 (1)
    • 토이 프로젝트 (4)
    • 각종 기술 삽질하며 익히기 - onpremise (11)
    • 학습과정 잡동사니 (7)
      • 오답노트 (7)
    • 평소 궁금증 파헤치기 (3)

블로그 메뉴

  • 홈
  • 태그
  • 방명록

공지사항

  • 아직 한참 부족하고 부끄러운 나의 github 링크

인기 글

태그

  • spark on centos7
  • ES
  • flink
  • filebeat
  • kafka
  • Kinesis
  • MWAA
  • Tableau
  • spark to mysql
  • Elk
  • CTAS
  • django
  • spark
  • EMR
  • jupyter
  • Api-Gateway
  • logstash
  • #데이터수집
  • LIVY
  • 서비쿼리
  • spark with elasticsearch
  • 파이썬
  • scikit-learn
  • 도커파일
  • 멀티 프로그래밍
  • aws builders online series
  • 쓰레드와 프로세스
  • #데이터 수집 절차
  • 네트워크 스위치
  • 프로세스

최근 댓글

최근 글

티스토리

hELLO · Designed By 정상우.
목숨건데이터엔지니어

foot-data-engineering

학습과정 잡동사니/오답노트

MAWW 에 EMR 접근시 생기는 에러

2022. 2. 17. 04:08

기본 default권한으로 maww를 구성하고 emr cluster 생성 operator 실행시 다음과 같은 에러가 발생한다.

 

botocore.exceptions.ClientError: An error occurred (AccessDeniedException) when calling the RunJobFlow operation: User: arn:aws:sts::266125016754:assumed-role/AmazonMWAA-MyAirflowEnvironment-role/AmazonMWAA-airflow is not authorized to perform: elasticmapreduce:RunJobFlow on resource: arn:aws:elasticmapreduce:ap-northeast-2:266125016754:cluster/* because no identity-based policy allows the elasticmapreduce:RunJobFlow action

 

AmazonElasticMapReduceFullAccess의 정책을 IAM role에 추가해주어 해결한다. 상황에 따라 FullAccess가아니라 필요한 요건을 넣어주어도 좋다.

'학습과정 잡동사니 > 오답노트' 카테고리의 다른 글

docker 환경에서 패키지 모듈관련 attribute 에러 해결  (0) 2022.05.17
장고 도커 컨테이너 백엔드 에서 mysql 연결시 생기는 에러  (0) 2022.05.17
vscode 에디터 kernal 에러 ["Fail to start the Kernel."]  (0) 2022.05.10
terraform remote-state bash script 에러 해결  (0) 2022.04.30
Amazon EMR에서 "session '0' not found"(Livy 사용 시)  (0) 2022.02.11
    '학습과정 잡동사니/오답노트' 카테고리의 다른 글
    • 장고 도커 컨테이너 백엔드 에서 mysql 연결시 생기는 에러
    • vscode 에디터 kernal 에러 ["Fail to start the Kernel."]
    • terraform remote-state bash script 에러 해결
    • Amazon EMR에서 "session '0' not found"(Livy 사용 시)
    목숨건데이터엔지니어
    목숨건데이터엔지니어

    티스토리툴바