Titulo Estágio
010-G-015_2013_SSO5_BigData
Área Tecnológica
Comunicação Telemática
Local do Estágio
AVEIRO
Enquadramento
Utilização de conceitos "BigData" para suporte a persistência e calculo de grande volume de indicadores no contexto de um produto de gestão de qualidade de serviços de telecomunicações.O Altaia é o sistema de gestão de Qualidade de Serviço da PT Inovação. Permite a captura e análise em tempo-real de indicadores de desempenho de rede e serviço. Mais informação sobre o produto pode ser obtida em http://www.ptinovacao.pt/#/menu/product/?familyID=45&itemID=95 Atualmente existe uma camada de mediação com a rede ou outros sistemas que recolhe dados “raw” e os guarda numa ou mais bases de dados relacionais num formato normalizado. Esses dados raws são usados como parâmetros para o cálculo de indicadores relevantes para o negócio. Estão a aparecer requisitos que exigem o drill-down dos indicadores calculados para os parâmetros que estiveram na base do seu cálculo e a necessidade de monitorização de serviços que geram grandes volumes de informação (por exemplo: chamadas móveis), o que vai provocar um crescimento enorme no volume de dados a tratar. Para lidar com este crescimento nos volumes de dados estamos a considerar usar hadoop e utilizar hdfs como repositório de dados “raw”. Neste estágio pretende-se validar essa abordagem e implementar o módulo que calcula os indicadores por cima do hadoop usando para isso algoritmos do tipo Map Reduce ou avaliar o uso de ferramentas como Cloudera Impala ou/e HBase ou Hive ou outras que venham a ser alvo de estudo durante o estágio. Os dados guardados no hdfs no contexto deste projeto seria um caso particular de dados a guardar num repositório empresarial, que futuramente permita extrair informação de dados provenientes de fontes diversas.
Objetivo
Objetivos e resultados esperados: -Seleção das ferramentas a utilizar. -Definição da organização dos dados -Implementação do cálculo de indicadores integrados no Altaia
Plano de Trabalhos - Semestre 1
Fase I
Estudo do estado da arte relativo a Map reduce, hadoop,
Escolha das plataformas a usar no desenvolvimento e testes,
Desenvolvimento de relatórios intermédios
Plano de Trabalhos - Semestre 2
Fase II
Análise do funcionamento do módulo de métricas do produto Altaia;
Desenvolvimento do protótipo nas plataformas escolhidas e análise critica dos resultados;
Escrita do relatório final.
Condições
Processo de Selecção: Entrevista Inova-Ria - PROGRAMA GENIUS
Os alunos interessados deverão enviar CV para regina@inova-ria.pt ou vera-l-santos@ptinovacao.pt
Observações
Aspetos inovadores :
Aplicação de conceitos e ferramentas na área de "Bigdata" num sistema de gestão de qualidade de serviços de telecomunicações
Ferramentas a utilizar :
Java ou scalaHadoop hdfsCloudera ImpalaOu outras a definir no âmbito do estágio
Referências bibliográficas :
A fornecer no decorrer do estágio
Orientador
João Bica Osório
est-j-osorio@ptinovacao.pt 📩