문제: 빅데이터 참조 아키텍처(Big Data Reference Architecture)란 무엇인가?

---

1. 개념

• 빅데이터 참조 아키텍처(Big Data Reference Architecture, BDRA)란 빅데이터(Big Data) 시스템을 효과적으로 구축·운영하기 위한 표준화된 구조와 구성요소, 데이터 흐름, 기술 스택 등을 정의한 설계 지침임.

2. 역할 & 목적

역할	목적
시스템 설계 기준 제공	빅데이터 시스템의 일관성, 확장성, 표준화 확보
기술 선택 가이드	다양한 기술·솔루션 조합 시 최적 구조 제시
데이터 흐름 명확화	데이터 수집→저장→처리→분석→활용 전 과정 체계화

3. 역사적 배경

• 2010년대 초, 빅데이터 활용이 확산되며 다양한 산업에서 대용량 데이터 처리 요구 증가
• NIST(미국표준기술연구소), IBM, 오픈그룹 등에서 참조 아키텍처 발표

4. 구조 및 구성요소

• 대표적 5계층 구조
  1. 데이터 소스 계층(Data Source Layer)
  2. 데이터 수집 계층(Data Ingestion Layer)
  3. 데이터 저장 계층(Data Storage Layer)
  4. 데이터 처리/분석 계층(Data Processing/Analytics Layer)
  5. 데이터 활용/서비스 계층(Data Consumption/Service Layer)
• 지원 계층: 보안(Security), 관리(Management), 거버넌스(Governance)

[도식] 빅데이터 참조 아키텍처 5계층 구조

계층	주요 역할	대표 기술
데이터 소스	데이터 발생	IoT, SNS, DB, 로그 등
데이터 수집	데이터 수집·적재	Kafka, Flume, Sqoop 등
데이터 저장	대용량 저장	HDFS, NoSQL, RDBMS 등
데이터 처리/분석	데이터 처리·분석	Spark, Hadoop, Hive 등
데이터 활용	시각화·서비스	BI, Dashboard, API 등

5. 원리

• 데이터의 생성부터 활용까지 전 주기적 흐름을 계층별로 분리하여, 각 계층별로 최적화된 기술과 역할을 할당함.

6. 종류

• NIST 빅데이터 참조 아키텍처
• IBM 빅데이터 플랫폼 아키텍처
• 오픈그룹(Open Group) 빅데이터 아키텍처 등

7. 핵심 용어 요약

용어	영문	설명
BDRA	Big Data Reference Architecture	빅데이터 참조 아키텍처
HDFS	Hadoop Distributed File System	분산 파일 시스템
ETL	Extract, Transform, Load	데이터 추출·변환·적재
NoSQL	Not Only SQL	비관계형 데이터베이스
BI	Business Intelligence	비즈니스 인텔리전스

8. 특징

• 계층별 모듈화, 확장성, 유연성, 표준화, 다양한 기술 적용 가능

9. 비교

구분	전통적 데이터 아키텍처	빅데이터 참조 아키텍처
데이터 유형	정형 데이터 중심	정형·비정형·반정형 모두
처리 방식	배치 중심	실시간·배치 혼합
확장성	제한적	수평적 확장 용이

10. 장단점

장점	단점
표준화로 설계 용이	복잡한 기술 조합 필요
확장성·유연성	초기 도입 비용 높음
다양한 데이터 처리	기술 변화에 민감

11. 최신 트렌드

• 클라우드 기반 빅데이터 아키텍처 확산
• AI/ML(인공지능/머신러닝) 통합
• 데이터 거버넌스, 보안 강화
• 오픈소스 기술 활용 증가

12. 어린이 버전 요약

• 빅데이터 참조 아키텍처는 "데이터 공장"을 만드는 설계도예요. 데이터가 들어오고, 저장되고, 가공되고, 필요한 사람이 쉽게 쓸 수 있도록 단계별로 나눠서 관리해요. 그래서 많은 데이터를 빠르고 똑똑하게 쓸 수 있어요!

---

13. 한눈에 보는 요약표

항목	내용 요약
개념	빅데이터 시스템 설계 표준 구조
목적	일관성·확장성·표준화 확보
구조	5계층(소스-수집-저장-처리-활용)
특징	모듈화, 확장성, 다양한 기술 적용
최신 트렌드	클라우드, AI/ML 통합, 보안 강화