Esta formação visa formar os programadores informáticos de capacidade para lidar com quantidades massivas de dados e compreender as técnicas atuais para esta área.

No final deste curso os participantes saberão:

·        Trabalhar com sistemas de grandes dados

·        Importar dados

·        Trabalhar e analisar dados

·        Produzir gráficos ou relatórios

Este Curso destina-se a Programadores em geral.

·        Programação orientada por objetos

·        Inglês técnico

·        Noções básicas de sistema operativo Linux

1 -    Grandes dados

·        Introdução

·        Os 5 Vs

·        Casos práticos de utilização

2 -    Hadoop

·        Introdução: alta disponibilidade, balanceamento de carga e processamento em paralelo

·        Ecossistema

·         HDFS - Sistema distribuído de ficheiros

·         Map Reduce - Mecanismos de processamento paralelo

·         Funcionalidades complementares e camada de abstração:

    Hive QL

    Pig

3 -    Dockers

·        Introdução

·        Instalação em Ubuntu

4 -    Spark

·        Introdução

·        Arquitetura

·         Spark SQL

·         Spark Streaming

·         Spark MLlib

·         Spark GraphX Tutorial

5 -    - Ambiente de desenvolvimento

·        Instalação do Apache Spark em Dockers

·        Importação de dados, transformação e análise

Outras acções de formação contínua (não inseridas no Catálogo Nacional de Qualificações)

Formação presencial

·        Participação / Motivação: mostra vontade e interesse, intervindo a propósito e colaborando na dinamização das actividades formativas;

·        Comportamento: demonstra comportamento adequado em termos de relacionamento com o grupo e formador, sendo educado, respeitador, assertivo e empático;

·        Responsabilidade: demonstra sentido de responsabilidade durante as sessões, cumprindo os tempos/prazos previstos face às actividades;

·        Assiduidade/Pontualidade: comparece no local de formação e á hora prevista de início das sessões;

·        Relações interpessoais: comunica com os colegas, formadores e coordenação demonstrando tolerância e espírito de equipa;

·        Domínio dos assuntos: Aplica os conhecimentos adquiridos em testes, exercícios, casos práticos e outras actividades desenvolvidas (média ponderada);

·        Compreensão/aprendizagem: transfere ou generaliza saberes adquiridos durante a formação a novas situações apresentadas.

·        Apresentação PowerPoint

·        Exercícios

·        Sala de Formação com 2m² por formando

·        Computador

·        Videoprojector

·        Quadro branco/Flip Chart

(Registar outros espaços e equipamentos que serão utilizados no decorrer da formação)