Amazon Redshift(7)

ggulcha·2022년 8월 4일
1

Amazon Redshift

목록 보기
7/10

✅ ENCRYPTED

  • 암호화된 S3의 데이터를 적재
  • 외부 클라이언트에서 암호화된 경우에 필요한 파라미터
  • 마스터 키를 같이 제공 해야함
ENCRYPTED MASTER_SYMMETRIC_KEY <master_key>

✅ EMR (Amazon Elastic MapReduce) 데이터 적재

  • Amazon EMR은 Apache Spark, Apache Hive 및 Presto와 같은 오픈 소스 분석 프레임워크를 사용하여 대규모 분산 데이터 처리 작업, 대화형 SQL 쿼리 및 기계 학습(ML) 애플리케이션을 실행하기 위한 클라우드 빅 데이터 플랫폼
  • 하둡 분산 파일 시스템(HDFS)
FROM 'emr://j-AVCDEF1234567/user/masterfile-*'
             <emr 클러스터 id>   <HDFS경로>

✅ DynamoDB 데이터 적재
→ Amazon DynamoDB는 완전관리형 NoSQL 데이터베이스 서비스로서 원활한 확장성과 함께 빠르고 예측 가능한 성능을 제공
NoSQL

✅ UNLOAD
S3로 데이터를 추출하는 UNLOAD 쿼리

UNLOAD ('') TO 's3://<경로>'[인증 파라미터];

✅ UNLOAD & COPY
unload 쿼리

→ S3 버킷을 열어 이관 되었는지 확인

✅ 추출 데이터 -> 레드시프트 클러스터 적재

0개의 댓글