Snowflake Data Delivery

문주은·2024년 4월 10일
0

1. Data Sharing

1-1. Purpose of Data Sharing

I have 2 accounts 'DataTeam' account and 'SalesTeam' account.

1-2. Data sharing method


2. Copy Data

2-1. Purpose of Copy

  • 대량의 데이터를 로드
  • 외부 데이터 소스(예: Amazon S3, Azure Blob Storage, Google Cloud Storage 등)에서 데이터를 Snowflake로 직접 복사하는 기능
  • 병렬로 데이터를 로드하여 처리할 수 있으며, 데이터를 자동으로 압축하고 병렬 처리
  • CSV, JSON, Parquet, Avro 등 다양한 형식으로 로드 가능

2-2. Copy Data method


3. Snowpipe

3-1. Purpose of Snowpipe

  • 실시간 데이터 처리에 유용
  • 외부 스테이징 영역에 데이터가 도착할 때마다 자동으로 데이터를 로드하는 기능을 제공
  • 데이터가 로드되는 즉시 Snowflake에 반영

[지원되는 클라우드 저장소]

3-2. Snowpipe method

profile
Data Engineer

0개의 댓글