big-data-commodity

COMODIDADE EM BIG DATA

DESAFIO

Um dos ministérios do Governo de Espanha decidiu disponibilizar conteúdo personalizado aos utilizadores dos seus portais web por via da identificação de padrões de navegação.

SOLUÇÃO

A Syone avançou com uma proposta de instalação e configuração de uma solução de Big Data, suportada pela Hortonworks Data Platform e ferramentas associadas. Os dados dos logs dos servidores web são carregados no HDFS via NFS e Flume, sendo depois analisados e trabalhados com algoritmos MapReduce através de Hive e PIG. A informação é explorada via ODBC, através de ferramentas de visualização como o Microsoft Excel.

RESULTADO

O projeto está atualmente ongoing e a Syone antecipou uma subscrição anual para uma solução de posicionamento e otimização do motor de busca para os portais Sistrix do ministério.