EFK 스택(ElasticSearch+Fluentd+Kibana)

참고 블로그: https://waspro.tistory.com/762

 

EFK

ElasticSearch

- 저장을 위한 모듈
- 실시간 검색/분석 기능
- 분산환경에 저장된 로그를 통합으로 수집하여 통합 저장소 역할

- 구성 요소: 마스터 노드, 데이터 노드
- NoSQL DB로 데이터의 백업/복구를 관리하는 저장소

Master 노드

• 클러스터 관리
• 인덱스의 메타 데이터(생성, 삭제), 클러스터 상태 정보, 데이터 저장
  
  

Data 노드

•  실제로 데이터 저장 및 처리

 

Client 노드

•  클라이언트 요청을 받아들이고 처리
• 요청을 Master 및 Data 노드로 라우팅하며, 결과를 수신하여 클라이언트에 반환
• 검색 요청을 분산, 보안 및 인증을 관리

 

FluentD

- 수집 및 정제를 위한 모듈
- K8S 환경에 DaemonSet으로 구성

Kibana

- 분석을 위한 모듈
- ElasticSearch에 저장된 데이터를 Visualize하는 대시보드