Logo do curso
Curso

Aprofundando no Airflow:

Executores Local e Celery

Quero estudar na alura

8h

Para conclusão

1312

Pessoas nesse curso

9.4

Avaliação média

Certificado

De participação

Introdução_

O que você aprenderá_

  • Crie DAGs para extrair dados do mercado financeiro
  • Entenda o que são os executores do Airflow
  • Aprenda como confiigurar o Executor Local
  • Saiba o que são workers e fila de tarefas
  • Aprenda como configurar o Executor Celery
  • Conheça diferentes configurações de paralelismo do Airflow

Público alvo_

Pessoas que querem aprimorar os conhecimentos referentes a ferramenta Apache Airflow e aprender sobre seus diferentes executores.

Millena Gená Pereira

Millena Gená Pereira

github

linkedin

Millena Gená é estudante de Ciência da Computação. Atualmente, é Instrutora de Dados aqui na Alura atuando principalmente na área de Engenharia de dados. Ela está sempre procurando aprender algo novo sobre tecnologia e é apaixonada por novas aventuras. Programar e ajudar as pessoas são seus hobbies favoritos! ^^

Curso atualizado em 24/01/2023

Ementa

  1. Configurando o ambiente

    • Criando um ambiente virtual
    • Instalando o Airflow
  2. Criando e testando o DAG

    • Extraindo dados de ações
    • Criando o DAG
    • Testando o DAG
  3. Configurando o Executor Local

    • Executores do Airflow
    • Configurando o LocalExecutor
    • Configurações de paralelismo
  4. Configurando o Executor Celery

    • Executor Celery
    • Configurando o CeleryExecutor
    • Testando o DAG no Celery
  5. Paralelismo no Celery

    • Parâmetro worker_concurrency
    • Trabalhando com dois DAGs
    • Pools
    • Limite por grupos de tarefas

Descubra se esse curso é pra você! Leia as primeiras aulas

Comece essa formação agora mesmo e capacite-se para seu próximo projeto!

Conheça os planos

Este e mais 4 cursos fazem parte das seguintes formações

Nossas formações são uma sequência de cursos e conteúdo para você se profissionalizar e se tornar quem o mercado procura!

Faça parte da nossa comunidade no discord!

Troque conhecimentos com a comunidade da Alura

Aprenda Engenharias e Arquiteturas de Dados com esse e outros cursos, comece agora!

Conheça os Planos para Empresas