Logo do curso
Curso

Databricks:

trabalhando com diversos formatos e tipos de arquivos

Quero estudar na alura

8h

Para conclusão

1662

Pessoas nesse curso

9

Avaliação média

Certificado

De participação

Introdução_

O que você aprenderá_

  • Compreenda os conceitos dos formatos de arquivo JSON, CSV, TXT, AVRO, Parquet e ORC
  • Entenda as vantagens e desvantagens de utilizar os diferentes tipos de arquivos
  • Aprenda a ler e salvar arquivos em diferentes formatos
  • Realize a compressão dos arquivos
  • Aprenda sobre as diferentes opções que há no PySpark no momento da leitura e escrita de arquivos
  • Faça uma análise comparativa entre os arquivos estudados

Público alvo_

Pessoas que trabalham com Big Data e precisam conhecer os formatos e tipos de arquivos utilizados no Databricks.

Nara Miranda Guimarães

github

linkedin

Sarah David Müzel

Curso atualizado em 02/01/2024

Ementa

  1. Conhecendo o DBFS e dbutils

    • Entendendo o problema
    • Apresentando o DBFS e dbutils
  2. Conhecendo o JSON e CSV

    • O que é um arquivo JSON?
    • Salvando o JSON comprimido
    • O que é um arquivo CSV?
    • Salvando o CSV com compressão
  3. Conhecendo o TXT e AVRO

    • O que é um arquivo TXT?
    • Salvando o TXT comprimido
    • O que é um arquivo AVRO?
    • Salvando AVRO com compressão
  4. Conhecendo o PARQUET e ORC

    • O que é um arquivo Parquet?
    • Trabalhando com particionamento
    • O que é um arquivo ORC?
    • Agrupando as partições

Descubra se esse curso é pra você! Leia as primeiras aulas

Comece essa formação agora mesmo e capacite-se para seu próximo projeto!

Conheça os planos

Este e mais 5 cursos fazem parte das seguintes formações

Nossas formações são uma sequência de cursos e conteúdo para você se profissionalizar e se tornar quem o mercado procura!
Escola

Data Science

Trabalhe com dados. Aprofunde seu conhecimento nas principais ferramentas de uma pessoa data scientist. Descubra as diferentes possibilidades de análise de dados, do Excel ao Python, e mergulhe em frameworks e bibliotecas, como Pandas, Scikit-Learn e Seaborn.

Conheça a escola

Pessoas estudando esse curso nesse mês:

Estude com elas

e mais 107 pessoas

Faça parte da nossa comunidade no discord!

Troque conhecimentos com a comunidade da Alura

Aprenda Engenharia de Dados com esse e outros cursos, comece agora!

  • Plus

    Impulsione a sua carreira com os melhores cursos e faça parte da maior comunidade tech.

    R$109/mês

    1 ano de Alura

    Valor total R$1.308 em até 12x

    Matricule-se

    Assine o PLUS e garanta:

    • Acesso a TODOS os cursos por 1 ano

      Formações com mais de 1500 cursos atualizados e novos lançamentos semanais, em Programação, Inteligência Artificial, Front-end, UX & Design, Data Science, Mobile, DevOps e Inovação & Gestão.

    • Certificado

      A cada curso ou formação concluído, um novo certificado para turbinar seu currículo e LinkedIn.

    • Mentorias com especialistas

      No Discord, você tem acesso a eventos exclusivos, grupos de estudos e mentorias com especialistas de diferentes áreas.

    • Comunidade exclusiva

      Faça parte da maior comunidade Dev do país e crie conexões com mais de 120 mil pessoas no Discord.

    • Acesso ao conteúdo das Imersões

      Acesso ilimitado ao catálogo de Imersões da Alura para praticar conhecimentos em diferentes áreas.

    • App Android e iOS para estudar onde quiser

      Explore um universo de possibilidades na palma da sua mão. Baixe as aulas para assistir offline, onde e quando quiser.

  • O mais escolhido

    Pro

    Acelere o seu aprendizado com a IA da Alura e prepare-se para o mercado internacional.

    R$149/mês

    1 ano de Alura

    Valor total R$1.788 em até 12x

    Matricule-se

    Todos os benefícios do PLUS e mais vantagens exclusivas:

    • Luri , a inteligência artificial da Alura

      Luri é nossa inteligência artificial que tira dúvidas, dá exemplos práticos, corrige exercícios e ajuda a mergulhar ainda mais durante as aulas. Você pode conversar com a Luri até 100 mensagens por semana.

    • Alura Língua - Inglês e Espanhol

      Aprenda um novo idioma e expanda seus horizontes profissionais. Cursos de Inglês, Espanhol e Inglês para Devs, 100% focado em tecnologia.

  • Ultra

    Transforme a sua jornada com benefícios exclusivos e evolua ainda mais na sua carreira.

    R$209/mês

    1 ano de Alura

    Valor total R$2.508 em até 12x

    Matricule-se

    Todos os benefícios do PRO e mais vantagens exclusivas:

    • Luri , com mensagens ILIMITADAS

      Mensagens ilimitadas para estudar com a Luri, a IA da Alura, disponível 24hs para tirar suas dúvidas, dar exemplos práticos, corrigir exercícios e impulsionar seus estudos.

    • Luri Vision , a IA que enxerga suas dúvidas

      Envie imagens para a Luri e ela te ajuda a solucionar problemas, identificar erros, esclarecer gráficos, analisar design e muito mais.

    • 6 Ebooks da Casa do Código

      Escolha os ebooks da Casa do Código, a editora da Alura, que apoiarão a sua jornada de aprendizado para sempre.

Conheça os Planos para Empresas