[Elastic] ELK Stack: Kibana 정리

💡 본 문서는 ELK Stack 중 'Kibana'에 대한 개념을 간단하게 정리해놓은 글입니다.
평소에 ELK Stack에 관심이 있거나 Kibana를 입문하고 싶으신 분들을 참고 부탁드립니다.

1. Kibana 소개

1.1 Elastic Stack (ELK Stack)

• E(Elasticsearch): 데이터 저장 및 검색
• L(Logstash): 데이터 수집
  • 로그 스태시는 데이터의 입력, 변환, 출력을 실시간 파이프라인으로 처리하는 오픈소스 데이터 수집 엔진.
  • 다양한 입력 소스에서 동시에 데이터를 수집(Ingest)하여 변환한 후 자주 사용하는 "스태시(Stash)-보관소"(Elasticsearch)로 전송
• K(Kibana): 데이터 시각화 및 리포팅 분석
  • 키바나는 엘라스틱서치와 연동하여 동작하는 데이터 시각화(리포팅) 및 분석

1.2 Kibana: 데이터 시각화 및 리포팅 분석

• Elasticsearch는 Restful 한 속성과 JSON 문서 기반의 통신을 지원하기에 http 프로토콜을 이용해 연동가능한 시각화 도구를 개발하였으며, 이를 Kibana라 합니다.
• Kibana는 Elasticsearch를 가장 쉽게 시각화 할 수 있는 도구이며, 검색/집계(aggregation) 결과를 웹에 시각화를 합니다.
• Discover, Visualize, Dashboard 3개의 기본 메뉴와 다양한 App 들로 구성되어 있고, 플러그인을 통해 App의 설치가 가능합니다.

 

2. Kibana 개념

2.1 Discover

• Discover는 Elasticsearch에 색인된 소스 데이터들의 검색을 위한 메뉴입니다.
• 검색 창에 질의문을 통해 데이터를 간편하게 검색, 필터링 할 수 있으며, 검색된 데이터의 원본 문서를 확인하거나 보고 싶은 필드만 선택해서 테이블 형태로 조회가 가능합니다.
  • 하지만 여기서 데이터를 조회할 경우 elastic에서 약간 변형한 형태의 데이터로 조회되는 것을 확인할 수 있으며, 넣어준 그대로의 데이터를 확인하고 싶으면 'Dev Tool'을 이용하여 Elastic DSL(Query)로 조회할 수 있습니다.
• 시계열(time series) 기반의 로그 데이터인 경우 시간 히스토그램 그래프를 통해 시간대별 로그 수도 표시됩니다.

2.2 Visualize

• Visualize는 aggregation 집계 기능을 통해 산출한 통계를 다양한 차트로 표현할 수 있는 패널을 만드는 메뉴입니다.
• Kibana는 히스토그램, 선 그래프, 원형 차트, 선버스트 등의 다양한 시각화 도구들의 사용이 가능하며, 이를 조합하여 대시보드를 구성할 수 있습니다.
• Kibana를 통해 표현할 수 있는 시각화도구는 다음의 링크를 참고하시기 바랍니다.
  • [Elastic official] Kibana feature 목록: https://www.elastic.co/kr/kibana/features

 

 

Dashboard

• Visualize 메뉴에서 만들어진 시각화 도구들을 조합하여 만든 대시보드입니다.
• 시각화 도구들을 클릭해서 데이터를 필터링하거나 검색창에 쿼리를 입력하여 검색이 가능하며, URL 형식으로 대시보드를 공유하거나 json 형식으로 내보내고 불러오기 등이 가능합니다.

 

참고

• [Elastic official] Kibana: https://www.elastic.co/kr/kibana/
• [Elastic official] Kibana feature 목록: https://www.elastic.co/kr/kibana/features