APRENDA AIRFLOW: Domine a Orquestração de Dados com Precisão Técnica
About this ebook
Domine a Orquestração de Dados com Precisão Técnica
Este livro é ideal para estudantes, engenheiros de dados, analistas e profissionais de DevOps que desejam dominar o Apache Airflow para orquestração de workflows complexos em ambientes de produção. Você aprenderá a configurar DAGs, trabalhar com operadores, integrar APIs externas, escalar com Celery e Kubernetes, e aplicar boas práticas de segurança e observabilidade. Explore conceitos como XCom, trigger rules, paralelismo, logging remoto e versionamento de DAGs, tudo com foco em aplicação prática.
Inclui: • Criação e execução de DAGs com operadores nativos
• Integração com APIs REST, bancos de dados e sistemas distribuídos
• Configuração de executores Celery e Kubernetes para alta escalabilidade
• Implementação de monitoramento com Prometheus e Grafana
• Automação de deploys com Git e pipelines CI/CD
• Estratégias de segurança com RBAC, criptografia e proteção de segredos
• Otimização de performance e balanceamento de carga entre workers
Ao final, você estará preparado para aplicar Apache Airflow de forma estratégica, garantindo automação confiável, escalabilidade e governança de dados em projetos corporativos.
airflow, orquestração de dados, pipelines, devops, ci/cd, monitoramento, automação, escalabilidade, big data, engenharia de dados
About the author
Autor Técnico e Pesquisador Independente
ORCID: https://orcid.org/0009-0006-
StudioD21 Smart Tech Content & Intell Systems
E-mail: [email protected]
LinkedIn: www.linkedin.com/in/
Autor técnico internacional (tech writer) com foco em produção estruturada de conhecimento aplicado. É fundador da StudioD21 Smart Tech Content & Intell Systems, onde lidera a criação de frameworks inteligentes e a publicação de livros técnicos didáticos e com suporte por inteligência artificial, como as séries Kali Linux Extreme, SMARTBOOKS D21, entre outras.
Detentor de 42 certificações internacionais emitidas por instituições como IBM, Google, Microsoft, AWS, Cisco, META, Ec-Council, Palo Alto e Universidade de Boston, atua nos campos de Inteligência Artificial, Machine Learning, Ciência de Dados, Big Data, Blockchain, Tecnologias de Conectividade, Ethical Hacking e Threat Intelligence.
Desde 2003, desenvolveu mais de 200 projetos técnicos para marcas no Brasil, EUA e México. Em 2024, consolidou-se como um dos maiores autores de livros técnicos da nova geração, com mais de 180 títulos publicados em seis idiomas. Seu trabalho tem como base o protocolo próprio de escrita técnica aplicada TECHWRITE 2.2, voltado à escalabilidade, precisão conceitual e aplicabilidade prática em ambientes profissionais.
