# redshift
Redshift error SQL Error [42601]: ERROR: syntax error at or near "select"
redshift에 쿼리 날리다가 발생한 에러이다. 사실 구글링해보면 이 에러가 너무 많은 내용을 담고 있어서 어디서 틀린건지 알아 챌 수 없다.redshift는 postgresql 기반으로 만들어져서 postgresql을 참고하면, postgre에서 규정하고 있는 에러
AWS Certified Cloud Practitioner CLF-C01 Redshift, EMR, Athena, QuickSight, DocumentDB, Neptune, QLDB, Managed Blockchain, DMS, Glue
Database and Analytics
데이터베이스 Part
AuroraDAX DynamoDB Accelerator DynamoDB Streams ElastiCache Redshift Spectrum dynamodb rds redshift
AWS 강의 정리 (5)
(6:04)낮은 대기 시간과 높은 전송 속도로 안전하게 콘텐츠 전송Content Delivery Network(CDN) : distributed network servers which delivers web pages based on their geographical
AWS RedShift
Intro Amazon Redshift 아키텍처 및 모범사례 - 김민성 솔루션즈 아키텍트(AWS) 유튜브 동영상을 기본으로 작성합니다. Amazon Redshift 일반적인 데이터웨어하우스 관리비용의 1/10 비용. RI Redshift 사용료 선납 기능. Data Lake와의 통합. 데이터레이크와의 통합 Amazon S3 DataLake와의 완...
spark: partitioning
Partitioning s3에 데이터를 저장할 때 where 조건절에 자주 쓰이면서 유니크한 수가 많지 않은 칼럼을 기준으로 파티셔닝을 해서 저장할 수 있다. UNLOAD : saveAsTable : spark write : 이렇게 저장하면 S3경로를
spark: jdbc parallelism
EMR Zeppelin에서 Spark를 실행해서 jdbc를 통해 데이터베이스(Redshift) 데이터를 병렬로 가지고 오는 방법Spark에서 제공하는 partitionColumn, lowerBound, upperBound, numPartitions 파라미터를 사용해서
Databases - Athena, Redshift
S3 위의 SQL layer라 볼 수 있다. \- S3의 데이터를 쿼리하기 위해 사용한다.완전한 서버리스 데이터베이스이다.얼마나 많은 쿼리를 사용했는 지에 따라 비용을 지불한다.쿼리 결과를 S3에 다시 적재할 수 있다.IAM을 통해 보안을 높일 수 있다.1회용 SQL
비구조화된 데이터 분석
로그데이터 분석, 하둡 활용 AWS에서 제공하는 서비스를 활용하면 온프레미스에서 다루기 어려웠던 분산 처리 기술인 하둡도 손쉽게 사용할 수 있다. 하둡은 대량의 자료를 처리할 수 있는 큰 컴퓨터 클러스터에서 동작하는 분산 응용 프로그램을 지원하는 프리웨어 자바 소프트웨