Big-Query

aiden·2022년 6월 27일
0
post-custom-banner

내가 생각하는 Big-Query 란 GCP의 BigQuery를 사용하면 간단한 SQL을 사용하여 빅 데이터를 수집, 저장, 분석 및 시각화할 수 있습니다. 이 완전 관리형 데이터 웨어하우스(Google!)는 인프라를 관리하므로 사용자(예: 데이터 과학자/분석가)는 엄청난 양(최대 페타바이트)의 데이터 분석에 집중할 수 있습니다.

개념
구글이 만들어서 제공하는 서비스입니다. 유료입니다.
데이터베이스라고 이해하면 됩니다.
빅데이터 플랫폼입니다.
SQL 언어를 사용해서 사용할 수 있습니다. (이름에 Query가 들어간 것을 볼 수 있음)
초대량 데이터 분석용 솔루션입니다.
실시간 솔루션은 아닙니다. 하지만 실시간 지원을 일부 합니다.
BI/DW의 엔진으로 많이 씁니다.

좋은점
많은 사용자들이 빅쿼리 데이터 집계나 처리가 매우 빠르다고 말합니다. 하둡, 스파트 등의 다른 빅데이터 플랫폼에 비해서 말입니다.
쓰는 만큼만 요금을 내면 됩니다.

나쁜점
아무생각없이 쓰면 요금이 매우 많이 나올 수도 있습니다. 1회 쿼리에 수십만원에서 수백만원을 쓰는 경우도 있습니다.
사용법 및 다루는 법이 어렵지는 않지만 훈련과 연습이 필요합니다.
그외에
대부분의 데이터과학자가 선호하는 솔루션입니다.
개인적인 생각으론 검색결과
데이터 엔지니어들은 좋아하는 사람과 싫어하는 사람들이 반반정도 되는 것 같습니다.

profile
웹/앱 백엔드 개발자
post-custom-banner

0개의 댓글