DESENVOLVIMENTO DE UMA FERRAMENTA DE COLETA E ARMAZENAMENTO DE DADOS DISPONÍVEIS EM REDES SOCIAIS

Resumo

O crescimento da internet na última década fez dela a maior fonte de dados de acesso público em todo mundo. Esses dados formam o que se chama de Big Data, termo que se refere ao enorme volume de dados que existe hoje nas mais diversas fontes. A partir desses dados, organizações têm a oportunidade de analisar o comportamento de seus clientes, o que o público pensa de seus produtos ou serviços, além de outras possibilidades. Porém, para um sistema conseguir realizar alguma análise, primeiro é necessário obter e armazenar um grande volume de dados. Considerando essa necessidade, este trabalho apresenta uma arquitetura de uma ferramenta para coleta e aplicação de algoritmos para análises de dados oriundos da web. Por meio dela é possível definir uma estrutura de armazenamento e configurar coletores de dados de diversas fontes, como páginas da internet e redes sociais, por diferentes métodos de busca, como palavras-chave e endereços. Além da arquitetura e do funcionamento, são descritos resultados de testes realizados em outubro e novembro de 2014.