Data Pipelines Inteligentes com Apache Airflow | Live#95
Автор: Luan Moreno | Engenharia de Dados Academy
Загружено: 2023-03-15
Просмотров: 4830
Описание:
A quantidade de formas possíveis de declarar uma DAG torna complicado o seu processo de criação de pipelines no Apache Airflow?
Seus problemas acabaram:
Uma série de melhorias para que você possa escrever DAGs de forma inteligente foram criadas pela Astronomer e os PMCs do Apache Airflow a partir da versão 2.0!
▶️ Dá o play nessa aula e aprenda quais são as melhores práticas para escrever pipelines de ETL utilizando os componentes que irão te trazer até 5x mais de otimização:
Astronomer Registry
TaskFlow API
Task Groups
Deferrable Operators
Astro Python SDK
Dynamic Task Mapping
Cosmos
⚠️ 𝗪𝗼𝗿𝗸𝘀𝗵𝗼𝗽 𝗔𝘀𝘁𝗿𝗼 𝗣𝘆𝘁𝗵𝗼𝗻 𝗦𝗗𝗞: 𝗗𝗲𝘀𝗲𝗻𝘃𝗼𝗹𝘃𝗲𝗻𝗱𝗼 𝗘𝗧𝗟 𝗻𝗼 𝗔𝗶𝗿𝗳𝗹𝗼𝘄 𝗽𝗮𝗿𝗮 𝗣𝗶𝗽𝗲𝗹𝗶𝗻𝗲𝘀 𝗱𝗲 𝗗𝗮𝗱𝗼𝘀 𝗠𝗼𝗱𝗲𝗿𝗻𝗼𝘀”.
De maneira fácil e eficiente, você irá aprender a 𝗰𝗿𝗶𝗮𝗿 𝗽𝗶𝗽𝗲𝗹𝗶𝗻𝗲𝘀 𝗻𝗼 𝗔𝗽𝗮𝗰𝗵𝗲 𝗔𝗶𝗿𝗳𝗹𝗼𝘄 𝗰𝗼𝗺 𝗼 𝗔𝘀𝘁𝗿𝗼 𝗣𝘆𝘁𝗵𝗼𝗻 𝗦𝗗𝗞, que é totalmente open-source.
São 7 horas de conteúdo e hands-on, com 𝗰𝗲𝗿𝘁𝗶𝗳𝗶𝗰𝗮𝗱𝗼 de participação.
👉🏾Clique para participar: https://swiy.co/D0-7
Quer mais conteúdos sobre a área de dados?
Toque aqui e conheça meus outros canais de conteúdo: https://theplumbers.com.br/links/
Fico feliz em saber que você me acompanha aqui! Deixe seu like no vídeo para ajudar esse conteúdo a chegar a mais pessoas!
Abraço,
Luan Moreno
Повторяем попытку...
Доступные форматы для скачивания:
Скачать видео
-
Информация по загрузке:
![Apache Spark [Spark-on-K8S] e Orquestração com Apache Airflow no Kubernetes](https://imager.clipsaver.ru/1oTbeGher2Q/max.jpg)
