Snowflake❄️

데이터 웨어하우스란? > 의사결정 지원 시스템으로 데이터를 저장, 처리, 분석 하도록 설계된 클라우드 기반 데이터베이스 시스템이다. 데이터 웨어하우스는 비즈니스 인텔리전스(BI), 데이터 마이닝, 에측 분석 등 다영한 분석 작업을 수행하는 데 사용된다. 최근 경영, 마

COPY 명령을 사용하여 로컬 파일 시스템 내부(즉, Snowflake 관리) 스테이지에서 데이터를 테이블로 대량 로딩하는 방법과 다르게, 250MB를 초과하는 대량의 데이터는 Google Cloud Storage 버킷을 이용하여 Snowflake로 대량 로드하기 위한

데이터를 적재한 웨어하우스에 다른 사용자들이 접근 권한을 해서, 분석 및 대시보드 작성, 테이블 생성 등 다양한 작업을 할 수 있는 환경을 구축해주는 과정이다. ✅ 권한을 줄 특정 사용자를 생성하는 단계이다. ✅ 만들어진 사용자 Jaewon이 웨어하우스에 접근하기 위

Intro > 스노우플레이크 데이터 웨어하우스를 구축을 했다면 dbt와 연동을 시켜 데이터 변환하는 작업을 수행하였다. dbt는 데이터 가공에 있어 transformation에 집중되어있다. 스노우플레이크 내에서 데이터를 처리하는 방법이 있다. Raw 데이터를 올린

스노우플레이크 데이터 웨어하우스를 구축을 했다면 dbt와 연동을 시켜 데이터 변환하는 작업을 수행하였다. dbt는 데이터 가공에 있어 transformation에 집중되어있다. 나눈 스노우플레이크 내에서 데이터를 처리하는 방법을 사용하였다. Raw 데이터를 올린 이후에

Snowflake의 공동 창업자인 Benoit Dageville과 Thierry Cruanes 가 한국을 방문하여 Snowflake의 AI 데이터 클라우드 비전을 공유하고, 플랫폼을 활용해 조직과 팀을 한 단계 더 발전시킬 방법에 대해 소개 해주었다. AI 및 앱 전반

현재 팔란티어를 사용하면서 업무를 하고 있지만, 내 마음 한켠엔 스노우플레이크가 조금 아니 많이 남아있다. 데이터 웨어하우징으로 전세계에서 두 기업이 가장 크게 시장을 장악하고 서로가 경쟁사이지만(데이터브릭스 미안), 스노우플레이크의 사용성 및 데이터로부터 인사이트를