Titulo Estágio
Big Data
Áreas de especialidade
Sistemas de Informação
Sistemas Inteligentes
Local do Estágio
Lisboa
Enquadramento
A tipologia de dados que as organizações hoje em dia exploram para tomada de decisão é limitada à informação interna dos seus sistemas transaccionais.
No entanto, nunca existiram tantos dados num formato digital que têm potencial para ser explorados e correlacionados com a referida informação interna. Para tal torna-se necessário que as organizações se preparem para explorar uma outra tipologia de dados oriunda de sistemas não transaccionais. Este tipo de dados, tipicamente dados não estruturados, são oriundos de redes sociais, sensores, dispositivos móveis, wearables, etc. O armazenamento desta informação e a capacidade de ligar estes dados aos dados transaccionais é um desafio onde soluções de Big Data vêm apoiar.
Objetivo
Construção mecanismos de recolha de dados não estruturados de dispositivos móveis e redes social para armazenamento em repositórios de dados sobre arquitectura Big Data
Utilização de plataforma Big Data Hadoop com arquitectura MPP.
Tratamento de streams de informação de sistemas móveis.
Tratamento de informação utilizando as mais avançadas técnicas de manipulação de dados, classificação de informação, num contexto de Data Lake.
Plano de Trabalhos - Semestre 1
Plano genérico que será adaptado na fase de preparação de acordo com os objectivos definidos para a dissertação:
Fase Preparação:
Reunião de Arranque /Kickoff (data a definir)
Clarificação de objectivos, definição de âmbito e identificação de principais outputs (alinhados com os objectivos da Dissertação)
Fase Concepção:
Documentação de Requisitos: 2 semanas (S1 e S2);
Análise Funcional e Desenho Técnico: 3 semanas (S3, S4 e S5);
Fase Desenvolvimento:
Construção de módulo aquisição dados (S6, S7);
Construção do módulo de classificação e armazenamento de dados - (S6, S7, S8, S9, S10);
Construção de módulo de apresentação de métricas sobre a informação recolhida (S9, S10);
Fase Testes:
Testes Integrados e Aceitação: 3 semanas (S11,S12 e S13).
Plano de Trabalhos - Semestre 2
Plano genérico que será adaptado na fase de preparação de acordo com os objectivos definidos para a dissertação:
Fase Preparação:
Reunião de Arranque /Kickoff (data a definir)
Clarificação de objectivos, definição de âmbito e identificação de principais outputs (alinhados com os objectivos da Dissertação)
Fase Concepção:
Documentação de Requisitos: 2 semanas (S1 e S2);
Análise Funcional e Desenho Técnico: 3 semanas (S3, S4 e S5);
Fase Desenvolvimento:
Construção de módulo aquisição dados (S6, S7);
Construção do módulo de classificação e armazenamento de dados - (S6, S7, S8, S9, S10);
Construção de módulo de apresentação de métricas sobre a informação recolhida (S9, S10);
Fase Testes:
Testes Integrados e Aceitação: 3 semanas (S11,S12 e S13).
Condições
Serão atribuídas ao aluno condições idênticas às de um profissional Deloitte, ou seja, computador pessoal, acesso à internet, espaço de trabalho no escritório, etc.
Orientador
Hélio Filipe Coelho de Almeida
halmeida@deloitte.pt 📩