ElasticSearch란?

tw·2024년 2월 3일

elasticsearch

개요

ElasticSearch를 공부하기 전에 왜 ElasticSearch가 생겨났는지 궁금했다.

ElasticSearch를 만든사람인데..( 왜 하나 같이 모두가 빡빡이..)

ElasticSearch는 샤이베논이라는 분이 개발하셨고, 요리학원을 다니는 아내를 위한 요리법 검색엔진을 만들기 위한 프로젝트이다.

Elasticserach

Elasticsearch 는 Elastic Stack 의 핵심 구성요소이다.
데이터를 저장하고 검색기능을 제공하며 유연한 방법 으로 분석 분석기능을 제공하기도 한다.
Elasticsearch 는 다른 구성요소와의 연계없이 자체만으로도 사용될 검색, 분석 기능등을 제공할 수 있다.

Logstash

로그, 메트릭과 같은 형태의 이벤트 데이터를 수집하는 것
수집된 데이터를 stash 로 전송할 때에는 사용자가원하는 다양한 방법으로 데이터의 행태를 변형하여 전송할 수 있다.
Logstash 는 3가지 타입의 플러그인을 제공하는데 이는 input, filter, output 플러그인이다.

Beats

Beasts 는 오픈소스 기반의 경량화된 데이터 shipper 이며, Logstash 와 상호보완적인 기능을 제공한다.
Logstash 가 서버사이드 구성요소라고 한다면 Beast 는 클라이언트 사이드 역할을 수행한다.
Beasts 의 코 어 라이브러리인 libbeat 는 원본데이터를 이동시키기 위한 API 를 제공한다.
Elasticsearch, Logstash, Kibana 와 같은 서버사이드 구성요소가 아니므로 non-cluster 노드라 할 수 있는 edge node 에 에이전트 를 설치해야 한다.

실습환경 구성

다운로드와 설치

설치파일

touch es_install.sh ; chmod +x es_install.sh ; vi es_install.sh
user1@ebes:~$ sudo ./es_install.sh

sudo apt install openjdk-11-jre-headless -y

 wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.17.7-amd64.deb

 wget https://artifacts.elastic.co/downloads/kibana/kibana-7.17.7-amd64.deb

 sudo dpkg -i elasticsearch-7.17.7-amd64.deb

 sudo dpkg -i kibana-7.17.7-amd64.deb

 sudo systemctl daemon-reload # 시스템 재부팅하지않고 구성파일 변경사항을 적용

 sudo systemctl enable elasticsearch --now

 sudo systemctl enable kibana --now

 sudo systemctl disable ufw --now

http://localhost:5601

http://localhost:5601로 접속

Elasticserach 기본

준비작업

엘라스틱서치의 모든 기능은 REST API 형태다. 즉,모든 요청과 응답을 REST API 형태로 제공한다.
REST 란 웹상의 모든 리소스에 URL 을 부여하고 활용하는 아키텍처다.
엘라스틱서치 클라이언트 앱은 REST API 를 사용할 수 있는 프로그램이라면 무엇이든지 상관없지만SoapUI, Katalon studio 등을 많이 사용한다.
CLI 환경에서는 curl 을 많이 사용한다.
특별한 프로그램을 사용하지 않고 Dev Tools 콘솔을 이용해서 REST API 를 호출할 것이므로 Management → Dev Tools를 활용한다.