# redshift

26개의 포스트
post-thumbnail

Query planning(2)

EXPLAIN 쿼리로 옵티마이저 실행 계획 분석하기

2022년 8월 5일
·
0개의 댓글
·
post-thumbnail

Query planning(1)

레드 시프트 query planning

2022년 8월 5일
·
0개의 댓글
·
post-thumbnail

Amazon Redshift(7)

Load & Unload

2022년 8월 4일
·
0개의 댓글
·
post-thumbnail

Amazon Redshift(6)

copy & unload

2022년 8월 3일
·
0개의 댓글
·
post-thumbnail

Amazon Redshift(5)

데이터 분산 방식 & 소트키 (Sort Key)

2022년 8월 3일
·
0개의 댓글
·
post-thumbnail

Redshift error SQL Error [42601]: ERROR: syntax error at or near "select"

redshift에 쿼리 날리다가 발생한 에러이다. 사실 구글링해보면 이 에러가 너무 많은 내용을 담고 있어서 어디서 틀린건지 알아 챌 수 없다.redshift는 postgresql 기반으로 만들어져서 postgresql을 참고하면, postgre에서 규정하고 있는 에러

2022년 8월 2일
·
0개의 댓글
·
post-thumbnail

데이터베이스 Part

AuroraDAX DynamoDB Accelerator DynamoDB Streams ElastiCache Redshift Spectrum dynamodb rds redshift

2022년 8월 1일
·
0개의 댓글
·
post-thumbnail

Amazon Redshift(4)

레드시프트 아키텍처

2022년 8월 1일
·
0개의 댓글
·
post-thumbnail

Amazon Redshift(3)

데이터베이스 툴 사용 접속 -> serverless vi 사용법

2022년 7월 29일
·
0개의 댓글
·
post-thumbnail

Amazon Redshift(2)

Redshift 클러스터 생성 방법

2022년 7월 29일
·
0개의 댓글
·
post-thumbnail

Amazon Redshift (1)

Amazon Redshift 사용을 위한 개요

2022년 7월 27일
·
0개의 댓글
·
post-thumbnail

AWS 강의 정리 (5)

(6:04)낮은 대기 시간과 높은 전송 속도로 안전하게 콘텐츠 전송Content Delivery Network(CDN) : distributed network servers which delivers web pages based on their geographical

2022년 7월 1일
·
0개의 댓글
·

AWS RedShift

Intro Amazon Redshift 아키텍처 및 모범사례 - 김민성 솔루션즈 아키텍트(AWS) 유튜브 동영상을 기본으로 작성합니다. Amazon Redshift 일반적인 데이터웨어하우스 관리비용의 1/10 비용. RI Redshift 사용료 선납 기능. Data Lake와의 통합. 데이터레이크와의 통합 Amazon S3 DataLake와의 완...

2022년 5월 24일
·
0개의 댓글
·

Simple Batch Pipeline

Simple Batch Pipeline

2022년 4월 16일
·
0개의 댓글
·

spark: partitioning

Partitioning s3에 데이터를 저장할 때 where 조건절에 자주 쓰이면서 유니크한 수가 많지 않은 칼럼을 기준으로 파티셔닝을 해서 저장할 수 있다. UNLOAD : saveAsTable : spark write : 이렇게 저장하면 S3경로를

2022년 3월 25일
·
0개의 댓글
·

spark: jdbc parallelism

EMR Zeppelin에서 Spark를 실행해서 jdbc를 통해 데이터베이스(Redshift) 데이터를 병렬로 가지고 오는 방법Spark에서 제공하는 partitionColumn, lowerBound, upperBound, numPartitions 파라미터를 사용해서

2022년 3월 22일
·
0개의 댓글
·
post-thumbnail

Databases - Athena, Redshift

S3 위의 SQL layer라 볼 수 있다. \- S3의 데이터를 쿼리하기 위해 사용한다.완전한 서버리스 데이터베이스이다.얼마나 많은 쿼리를 사용했는 지에 따라 비용을 지불한다.쿼리 결과를 S3에 다시 적재할 수 있다.IAM을 통해 보안을 높일 수 있다.1회용 SQL

2022년 3월 10일
·
0개의 댓글
·
post-thumbnail

비구조화된 데이터 분석

로그데이터 분석, 하둡 활용 AWS에서 제공하는 서비스를 활용하면 온프레미스에서 다루기 어려웠던 분산 처리 기술인 하둡도 손쉽게 사용할 수 있다. 하둡은 대량의 자료를 처리할 수 있는 큰 컴퓨터 클러스터에서 동작하는 분산 응용 프로그램을 지원하는 프리웨어 자바 소프트웨

2021년 12월 4일
·
0개의 댓글
·