Guia prático de replicação multi-cluster no Kafka com MirrorMaker 2

Описание: 🍽️ Espetinho de Kafka — MirrorMaker 2 na Prática: Active-Passive e Active-Active

Neste vídeo monto, passo a passo, um lab real em Docker com dois clusters Kafka locais e mostro na prática como funciona a replicação com o MirrorMaker 2 em cenários Active-Passive e Active-Active.

Primeiro revisito rapidamente o que é o MM2, os conceitos fundamentais (replication policy, sincronização de consumer groups, tópicos internos, mensagens grandes) e como tudo isso se encaixa na replicação entre clusters.

Depois vamos para a mão na massa: subimos os clusters com Docker Compose, configuramos o Active-Passive, testamos a replicação de tópicos, offsets e validamos o comportamento via linha de comando e UI gráfica.

Na sequência, entro no modo Active-Active, explicando a estratégia com IdentityReplicationPolicy + SMTs baseadas em headers para prevenir loops de mensagens, manter o mesmo nome de tópico nos dois lados e suportar cenários multi-região e de alta disponibilidade.

Para fechar, trago dicas para produção: limites de mensagem ( maior 1MB), fatores de replicação recomendados, exclusão de tópicos internos e de managed services, cuidados com sync de consumer groups e considerações de versão do Kafka ao rodar o MM2.

Se você quer sair do “hello world” e entender como desenhar Active-Active de verdade entre clusters Kafka, com exemplos que você consegue repetir na sua máquina, este vídeo foi feito para você.

github.com/mordp1/kafka-mirror-java
github.com/mordp1/espetinhodekafka

🎬 Assista agora e sirva-se de conhecimento!

#ApacheKafka #Kafka #KafkaPerformance #KafkaBenchmark #DevOps #DataStreaming. #KafkaMirrorMaker #datatransfer #datamigration #disater #dataengineering #datastreaming #dev #apachekafka

​