APRENDA AWS GLUE: Crie Pipelines de ETL Serverless e Catálogos de Dados
About this ebook
Indicado para estudantes e profissionais que buscam domínio prático em orquestração de dados, ETL serverless e automação de pipelines corporativos com AWS Glue. O conteúdo abrange desde a criação, execução e monitoramento de jobs até integração avançada com AWS S3, Redshift, Athena, RDS, DynamoDB, Lake Formation, Glue Data Catalog, além de conexão com ferramentas como Databricks, Apache Spark, Airflow, Python, PySpark, Pandas, Grafana, Kibana e integrações multi-cloud com Azure e Google Cloud.
Aprenda a transformar, catalogar e automatizar fluxos de dados, criar workflows escaláveis, aplicar validação, tuning, particionamento e otimizar big data analytics em ambientes profissionais. Ganhe autonomia para construir pipelines robustos, implementar data lakes, governança e integrações seguras em larga escala.
Você aprenderá:
• Configurar e executar jobs ETL serverless com Glue e PySpark
• Integrar AWS Glue com S3, Redshift, Athena, RDS e DynamoDB
• Orquestrar pipelines multi-cloud, datalakes e automação de dados
• Gerenciar Glue Data Catalog, workflows, triggers e crawlers
• Aplicar validação, tuning, particionamento e performance em big data
• Conectar Glue a Databricks, Airflow, Python, Pandas e Spark
• Monitorar e auditar pipelines com Grafana, Kibana e CloudWatch
• Garantir segurança, governança e automação de rotinas de dados
• Otimizar processos de analytics, relatórios e BI corporativo
Ao final, você dominará AWS Glue para construir soluções ETL serverless, escaláveis e seguras, prontas para atender projetos de dados, analytics, integração multi-cloud e automação corporativa.
aws glue, etl, serverless, pipelines, s3, redshift, athena, data catalog, pyspark, airflow, databricks, big data, automação, integração cloud, governança, analytics, monitoramento, particionamento, tuning
About the author
Diego Rodrigues
Autor Técnico e Pesquisador Independente
ORCID: https://orcid.org/0009-0006-
StudioD21 Smart Tech Content & Intell Systems
E-mail: [email protected]
LinkedIn: linkedin.com/in/diegoexpertai
Autor técnico internacional (tech writer) com foco em produção estruturada de conhecimento aplicado. É fundador da StudioD21 Smart Tech Content & Intell Systems, onde lidera a criação de frameworks inteligentes e a publicação de livros técnicos didáticos e com suporte por inteligência artificial, como as séries Kali Linux Extreme, SMARTBOOKS D21, entre outras.
Detentor de 42 certificações internacionais emitidas por instituições como IBM, Google, Microsoft, AWS, Cisco, META, Ec-Council, Palo Alto e Universidade de Boston, atua nos campos de Inteligência Artificial, Machine Learning, Ciência de Dados, Big Data, Blockchain, Tecnologias de Conectividade, Ethical Hacking e Threat Intelligence.
Desde 2003, desenvolveu mais de 200 projetos técnicos para marcas no Brasil, EUA e México. Em 2024, consolidou-se como um dos maiores autores de livros técnicos da nova geração, com mais de 180 títulos publicados em seis idiomas. Seu trabalho tem como base o protocolo próprio de escrita técnica aplicada TECHWRITE 2.3, voltado à escalabilidade, precisão conceitual e aplicabilidade prática em ambientes profissionais.
