Logo do curso
Curso

Spark:

processamento de linguagem natural

Quero estudar na alura

8h

Para conclusão

1944

Pessoas nesse curso

9.3

Avaliação média

Certificado

De participação

Introdução_

O que você aprenderá_

  • Aprenda os principais passos no processamento de linguagem natural
  • Remova caracteres especial usando expressões regulares
  • Aplique o conceito de tokenização nos dados
  • Remova as palavras vazias ou StopWords
  • Construa a Sacola de Palavas ou Bag of Word
  • Aprenda a ler o resultado do Bag of Word no PySpark
  • Entenda a relevancia das palavras com o TF-IDF
  • Ajuste uma Árvore de Decisão para classificar

Público alvo_

Pessoas com conhecimento em Python. Pessoa interessada em entender como fazer uma análise textual usando PySpark e entregar um modelo de classificação usando análise de sentimento.

Ana Duarte

Ana Duarte

github

linkedin

Sou bacharela em Estatística e atualmente curso Ciência da Computação. Já atuei como cientista de dados no ramo educacional e financeiro e hoje sou instrutora na Escola de Dados da Alura e voluntária na equipe de projetos do grupo Data Girls. Sou apaixonada por transformar dados em informação inteligente usando a ciência de dados em diversos tipos de aplicação. Fora isso, sempre estou acompanhando alguma série e procurando novas rotas para andar de bike.

Curso atualizado em 14/06/2023

Ementa

  1. Introdução

    • Contexto do NLP
    • Explorando os dados
  2. Limpeza e processamento

    • Processo e bibliotecas
    • Caractere especial
    • Tokenização
    • StopWords
  3. Vetorização das palavras

    • Bag of words
    • Hashing TF
    • TF-IDF
    • Pipeline de transformação
  4. Treinando o modelo

    • Possíveis modelos
    • Árvore Decisão
    • Amostra e Treino
  5. Explicando os resultados

    • Teste e métricas
    • Nova Frase

Descubra se esse curso é pra você! Leia as primeiras aulas

Comece essa formação agora mesmo e capacite-se para seu próximo projeto!

Conheça os planos

Este e mais 4 cursos fazem parte das seguintes formações

Nossas formações são uma sequência de cursos e conteúdo para você se profissionalizar e se tornar quem o mercado procura!

Faça parte da nossa comunidade no discord!

Troque conhecimentos com a comunidade da Alura

Aprenda Engenharias e Arquiteturas de Dados com esse e outros cursos, comece agora!

Conheça os Planos para Empresas