10h

Para conclusão

16598

Pessoas nesse curso

9.3

Avaliação média

Certificado

De participação

Introdução_

O que você aprenderá_

  • Aprenda como utilizar o Python para criar aplicações Spark
  • Descubra como fazer ciência de dados com as ferramentas do Spark
  • Conheça o DataFrame do Spark
  • Manipule conjuntos de dados volumosos
  • Conheça e crie arquivos utilizados em projetos Big Data

Público alvo_

Cientistas de dados e entusiastas em dados com um conhecimento intermediário na linguagem Python e básico em instruções SQL.

Rodrigo Fernando Dias

Rodrigo Fernando Dias

linkedin

Rodrigo é estatístico e especialista em Big Data com forte interesse em inteligência artificial, ferramentas de automação, geoprocessamento, desenvolvimento web, web scraping, machine learning e Data Science. É instrutor e coordenados da Escola de Dados da Alura.

Curso atualizado em 14/07/2026

Ementa

  1. Começando o Trabalho

    • Apresentação
    • Apache Spark - Introdução
    • Utilizando Spark no Windows
    • Spark no Google Colab
  2. Carregamento de Dados

    • SparkSession
    • DataFrames com Spark
    • Carregamento de dados
  3. Manipulando os Dados

    • Operações básicas
    • Analisando os dados
    • Convertendo String - Double
    • Convertendo String - Date
  4. Seleções e Consultas

    • Selecionando informações
    • Identificando valores nulos
    • Ordenando os dados
    • Filtrando os dados
    • O comando LIKE
  5. Agregações e Junções

    • Sumarizando os dados
    • Juntando DataFrames
    • SparkSQL
  6. Formas de Armazenamento

    • Arquivos CSV
    • Arquivos Parquet
    • Particionamento dos dados
    • Conclusão

Descubra se esse curso é pra você! Leia as primeiras aulas

Comece essa formação agora mesmo e capacite-se para seu próximo projeto!

Conheça os planos

Este e mais 4 cursos fazem parte das seguintes formações

Nossas formações são uma sequência de cursos e conteúdo para você se profissionalizar e se tornar quem o mercado procura!

Pessoas estudando esse curso nesse mês:

Estude com elas

e mais 151 pessoas

Faça parte da nossa comunidade no discord!

Troque conhecimentos com a comunidade da Alura

Aprenda Engenharias e Arquiteturas de Dados com esse e outros cursos, comece agora!

Conheça os Planos para Empresas