Descrição:

O curso permite ao aluno uma visão geral do Ecossistema Hadoop e aborda como armazenar e fazer a gestão de grandes volumes de dados. Além disso,  abordo o uso da linguagem HQL e SQL Impala como uma alternativa para manipulação e tratamento dos dados no Sistema Hadoop.

Público alvo:

Profissionais técnicos ou de negócio que necessitam trabalhar com processamento de grandes volumes de dados através de uma linguagem simples de consulta.

Pré-requisitos:

Noções do Sistema Operacional Linux, conhecimento básico do ecossistema Hadoop (HDFS e MAP REDUCE) e conhecimento básico da Linguagem SQL.

Conteúdo:

• Introdução ao Hive e Impala|
• Motivação para uso do Hive e Impala |
• DDL – External table, Manage table e View |
• Leitura de arquivos posicionais, delimitados e json |
• DML – Manipulação de dados |
• Hive Query Language (componentes principais, tipos de dados, Hive QL, Hive Data Functions, criar banco de dados e tabelas) |
• Performance – Map Join, particionamento, paralelismo e bucket.

Uso Prático:

No final do curso, o participante estará apto para usar Hive e Impala para fazer consultas nos dados que combinam, criam e modificam tabelas.