elasticsearch node query cache + restart

elasticsearch query cache 세팅을 바꿔줘야한다고 해서 이것저것 찾아봤는데 움...이렇게 해도 되나 싶어서 일단 정리만 해봤다. 테스트 진행해보고 수정해줄 부분은 수정해줄 예정이다. 일단 query cache 를 바꿔서 테스트해봤으면 한다는 의견에 따라 찾아봤는데 cache는 elasticsearch.yml 을 변경해야해야했다. 그리고 elasticsearch를 restart해줘야했다. restart를 해주면 모든 노드들이 내렸갔다가 올라가야하는데, 이슈가 생기지 않을까 걱정이 됐다. 이는 두 가지 방법이 있었다.

[Node query cache setting]

• filter query 에 대한 응답속도를 개선하기 위한 캐시작업
• 스코어 계산이 필요한 query 나 aggreagation 은 해당 캐시가 적용되지 않음
• LRU 정책을 사용함 (가장 오랫동안 사용하지 않은 쿼리가 제거되고 새 데이터가 들어감)
• 최대 1000query가 저장될 수 있음
• 최소 10%의 heap 공간을 사용함
• elasticsearch.yml 에 index.queries.cache.enabled 과 indices.queries.cache.size 이 추가나 수정이 필요함
• index.queries.cache.enabled : 인덱스별로 캐시를 사용할 것인지 세팅이 가능함 인덱스를 생성할때나 닫힌 인덱스에서만 세팅이 가능 (default값이 true)
• index.queries.cache.size : JVM Heap의 캐시 공간을 얼마나 사용할지 설정(default값이 10%)

  index.queries.cache.enabled: true 또는 false
  indices.queries.cache.size: 10% 또는 5mb

[Restart]

• 종류
  - Full-cluster restart
  : 클러스터의 모든 노드를 종료했다가 다시 시작
  - Rolling restart
  : 한번에 하나의 노드만 차례대로 종료
  : 서비스가 중단되지 않음
• How To Restart
  (1) 샤드 할당 비활성화
  데이터 노드를 종료하면 해당 노드의 샤드를 클러스터의 다른 노드로 복제하기 위해 기다리는데, 이때 많은 I/O가 사용된다. 하지만 노드가 바로 곧 시작되므로 이는 불필요한 작업이다. 때문에 데이터 노드를 종료하기 전에 복제본 할당을 비활성화시켜주는 게 좋다.

   PUT _cluster/settings
   {
     "persistent": {
       "cluster.routing.allocation.enable": "primaries"
     }
   }

  (2) 인덱스 flush(즉, 인덱스 새로고침)
  샤드 복구를 빠르게 해준다.

  POST /_flush

  (3) 노드 셧다운(full cluster의 경우에는 모든 노드 셧다운/ rolling의 경우에는 싱글 노드 셧다운)

  /etc/init.d/elasticsearch stop
  // 모든 노드를 한꺼번에 stop하는 커맨드와 싱글 노드를 stop하는 커맨드를 어떻게 다르게 쓰는거지?

  (4) 수정할 부분 수정
  (5) 노드 재시작

  /etc/init.d/elasticsearch start
  // 모든 노드를 한꺼번에 start하는 커맨드와 싱글 노드를 stop하는 커맨드를 어떻게 다르게 쓰는거지?

  *재시작하면서 아래 명령어로 모니터링하면서 진행하는 것이 좋음

  GET _cat/health
  GET _cat/nodes

  (6) 샤드 재할당 원복

  PUT _cluster/settings
  {
    "persistent": {
      "cluster.routing.allocation.enable": "null"
    }
  }

  *진행시 아래 명령어로 모니터링

  GET _cat/health
  GET _cat/recovery

참고 : https://www.elastic.co/guide/en/elasticsearch/reference/current/query-cache.html
https://velog.io/@mayhan/Elasticsearch-Cache
https://www.elastic.co/guide/en/elasticsearch/reference/current/restart-cluster.html#restart-cluster-full