Thursday, August 24, 2023

Conduktor - Bir Kafka Proxy

Conduktor Gateway
Açıklaması şöyle
Conduktor Gateway is at its core a Kafka proxy: it listens and talks the Kafka protocol (my-kafka:9092).

Its role is to intercept the traffic from any applications and tooling —thinking they speak to the real Kafka cluster to do their business— and to seamlessly accept/deny/transform the requests/responses, adding the layer of intelligence and control you want in your organization! It's totally transparent for the clients and for the real Kafka clusters, no code change, nothing. They're just communicating together through a smart layer you can control.

This way, you get infinite flexibility without changing a single line of code in your applications ...
Seamless AWS S3 offloading
Kafka mesajlarının varsayılan büyüklüğü en fazla 1 MB. Bu değer broker trafında message.max.bytes ayarı ile değiştirilebilir anca bu sefer de çok fazla ağ trafiği problemi ortaya çıkıyor.
Conduktor mesajları AWS S3 üzerinde saklayabiliyor


No comments:

Post a Comment

kafka-consumer-groups.sh komutu

Giriş Bir topic'i dinleyen consumer'ları gösterir. Aynı topic'i dinleyen consumer group'ları olabilir. Her topic farklı part...