2020-03-31

• Sleuth
  1. Span 생성시점- HttpRequest 요청 들어온 후 Intercept 처리 할 때
• ES
  • 403 Index read-only, cluster_block_exception 발생문제 Trouble Shooting
    • 원인파악 : ES사용량이 95% 이상로 내려갔을 시, ES 내부적으로 INDEX_READ_ONLY OPTION을 TRUE로 활성화 시켜서 더이상 index를 write 하지 못하게 한다고 한다.
      • [ES LOG] flood stage disk watermark [95%] exceeded on [n6~][es-name][데이터경로], free: 남은 데이터노드 용량 등..
    • 문제해결 : 인덱스 삭제 및 용량 정리 => 아래 api call 호출

PUT your_index_name/_settings
{
  "index": {
    "blocks": {
      "read_only_allow_delete": "false"
    }
  }
}

• 참조 : https://www.nakjunizm.com/2018/10/26/ElasticSearch_Cluster_block_exception/