Este livro é indicado para estudantes e profissionais que buscam dominar Apache Kafka em ambientes corporativos, engenharia de dados, DevOps, squads técnicos e projetos de transmissão de dados em larga escala. Com abordagem prática e exemplos validados, você aprenderá a configurar clusters, operar pipelines distribuídos, implementar producers e consumers resilientes, orquestrar integrações com bancos SQL e NoSQL, e gerenciar fluxos de dados críticos com alta disponibilidade, segurança e performance.
O conteúdo cobre instalação profissional, produção e consumo de mensagens, tuning de partitions, automação com Docker e Kubernetes, integração com PostgreSQL, MongoDB, Spark, monitoramento avançado com Prometheus e Grafana, além de segurança com SSL, ACLs e autenticação. Inclui técnicas de modelagem de tópicos, replicação, ajuste de offsets, CDC com Debezium, uso de Schema Registry, deploys CI/CD, troubleshooting, estratégias de observabilidade, automação e governança.
Inclui:
• Instalação profissional e operação de clusters Kafka
• Integração com PostgreSQL, MongoDB, Spark, ELK, Jenkins
• Modelagem de tópicos, tuning de partitions e replicação
• Segurança com SSL, ACLs, autenticação e autorização
• Monitoramento e métricas com Prometheus, Grafana, JMX
• CDC, Schema Registry, pipelines CI/CD e automação cloud-native
• Resolução de erros, troubleshooting e boas práticas
Domine Apache Kafka e lidere a construção de pipelines de dados, automação de integrações, soluções event-driven, arquitetura distribuída e projetos críticos em tempo real.
kafka, mensageria distribuída, devops, streaming de dados, clusters, producers, consumers, ci/cd, kubernetes, integração de sistemas, monitoramento, segurança, cloud
Diego Rodrigues
Autor Técnico e Pesquisador Independente
ORCID: https://orcid.org/0009-0006-
StudioD21 Smart Tech Content & Intell Systems
E-mail: [email protected]
LinkedIn: linkedin.com/in/diegoexpertai
Autor técnico internacional (tech writer) com foco em produção estruturada de conhecimento aplicado. É fundador da StudioD21 Smart Tech Content & Intell Systems, onde lidera a criação de frameworks inteligentes e a publicação de livros técnicos didáticos e com suporte por inteligência artificial, como as séries Kali Linux Extreme, SMARTBOOKS D21, entre outras.
Detentor de 42 certificações internacionais emitidas por instituições como IBM, Google, Microsoft, AWS, Cisco, META, Ec-Council, Palo Alto e Universidade de Boston, atua nos campos de Inteligência Artificial, Machine Learning, Ciência de Dados, Big Data, Blockchain, Tecnologias de Conectividade, Ethical Hacking e Threat Intelligence.
Desde 2003, desenvolveu mais de 200 projetos técnicos para marcas no Brasil, EUA e México. Em 2024, consolidou-se como um dos maiores autores de livros técnicos da nova geração, com mais de 180 títulos publicados em seis idiomas. Seu trabalho tem como base o protocolo próprio de escrita técnica aplicada TECHWRITE 2.3, voltado à escalabilidade, precisão conceitual e aplicabilidade prática em ambientes profissionais.