高性能 Kafka → Elasticsearch / ClickHouse 日志消费者,替代 Logstash。
emorash 是一个使用 Golang 编写的高性能日志消费者,专为大规模日志场景设计。它能够从 Kafka 消费日志数据,并高效地写入 Elasticsearch 或 ClickHouse,提供比 Logstash 更低的资源占用和更高的吞吐量。
每秒处理数万条日志,满足大规模场景需求
资源占用低,部署简单,运行稳定
支持同时写入多个目标集群
支持失败重试与断点续传
docker pull opsrelay/emorash:latest$ emorash --config /etc/emorash/config.yaml$ emorash --kafka-brokers kafka:9092 --es-hosts http://es:9200$ emorash --clickhouse-dsn tcp://clickhouse:9000