Public cloud 찾아보기

• AWS
• GCP
• Microsoft Azure
• Databricks
• RAG

• 필요성
• 차이점
• 비용
• 다루는 데이터양의 차이
• databricks는 에이전트 개발 툴같다 aws는 데이터 기반으로한 챗봇, 서버 구축하는 모델 만들기 사이트 like 모델 옷입히기 게임이라면, databricks는 모델 얼굴부터 내가 만드는 느낌이랄까 심즈처럼

databricks는 데이터 저장이 아닌 쿼리 정의를 저장함으로써 보안+데이터 실시간 반영 가능해지는 거 같음

오후 세션

1. Discover는 커스텀 설정 가능한 도메인별로 데이터, 노트북, 앱, 대시보드 등 자산을 정리하여 볼 수 있는 창구 옵션이라고 보시면 됩니다.
2. 하이브 메타스토어는 하둡 기반 데이터의 테이블 스키마랑 메타데이터(위치, 컬럼, 파티션 등) 저장하는 중앙 카탈로그입니다. 현재는 데이터브릭스에서 legacy 입니다. Unity Catalog가 현재 디폴트며 권고 방식입니다.
3. SQL warehouse는 데이터브릭스에서 SQL에 최적화된 형태로 제공하는 컴퓨트 형태입니다

Json 로그가 핵심임

공부 자료

세션 피피티

databricks 깃허브

2026 5월 6월 7월 웨비나 신청 사이트

vocareum 로그인

databricks 아카데미 로그인

ai_parse_document 함수 설명: PDF나 이미지 같은 비정형 문서에서 텍스트와 데이터를 AI로 자동 추출하는 Databricks SQL 함수 사용법

Databricks 아키텍처 개요: 사용자가 코드를 짜는 영역(Control Plane)과 실제 데이터가 처리되는 영역(Data Plane)으로 나뉜 Databricks의 기본 시스템 구조

Vocareum 실습 가이드: Databricks 학습 과정 중 제공되는 가상 실습 환경(Vocareum)에 접속하고 사용하는 절차- 한국어

Databricks 대시보드 내에서 데이터를 시각화(차트, 그래프 등)하고 위젯을 설정하는 방법