elk-playground

log pipeline system w/ ELK stack

---

Filebeats -> Kibana -> Logstash -> Elastic Search -> Kibana

• Elastic Search 3대 클러스터 구성
• Filebeats, fluentd 등의 로그수집기 대응
• Kafka 연동

---

TODO

• 단일 형태의 ELK stack 구성 테스트
  • custom ingest pipeline w/ filebeat
• Elastic Search Cluster 구성 테스트
  • Elastic Search 3대 클러스터 구성
  • Kibana 연동
  • Logstash 연동
    • custom ingest pipeline w/ filebeat
• Kafka 연동
  • filebeat -> kafka -> logstash -> elastic search -> kibana

---

Usage

make build
make devfb
make topic TOPIC=my-topic
make produce TOPIC=my-topic
make consume TOPIC=my-topic