[DP-203] Azure Synapse Analytics 개요

Azure Synapse Analytics

A core service based on SQL that brings together data integration, data warehousing, and big data analytics.

구조화된 데이터를 다루는 여러 다른 서비스들이 결합된 컴파일이다.

SQL Data Warehouse, Data Lake, Data Factory와 같은 서비스들을 가져와 처음부터 끝까지 전체 데이터 엔지니어링 경험을 실제로 수행할 수 있게 해주는 통합 서비스다.

Azure Synapse Analytics의 주요 구성요소

1) Ingest Phase

• Taking 'Data Factory' and putting it into 'Azure Synapse Analytics'

2) Store Phase

• Data Lake, Blob Storage, SQL Database 를 사용할 수 있게 해주는 저장 단계

3) Prep and Train

• Databricks, Azure Machine Learning

4) Model and Serve

• SQL Data Warehouse

Azure Data Lake Storage Gen2 와 Azure SQL Data Warehouse 의 차이는?

Azure Data Lake Storage Gen2는 비정형 데이터 스토리지 및 처리를 위한 플랫폼이고, Azure SQL Data Warehouse는 대규모 데이터 웨어하우스 및 분석 작업을 위한 관계형 데이터베이스 서비스입니다.

Azure Blob Storage에서 계층형 네임스페이스를 활성화하면 Azure Data Lake Storage Gen2가 생성됩니다. Azure SQL Data Warehouse는 별도의 관계형 데이터베이스 서비스로 Azure SQL Data Warehouse를 생성하려면 별도의 DB 인스턴스를 생성해야 합니다.

기본 아키텍처