Arquitectura de sistemes BigData pel Record Linkage de xarxes socials

Abstract

Els documents demogràfics permeten estudiar un gran conjunt de comportaments en diferents àmbits com ara l'evolució social i econòmica del passat. Gràcies a les tècniques informàtiques de visió per computador es pretenen construir xarxes socials històriques aprofitant les dades demogràfiques de les que es disposen. Aquest treball es centra en la implementació d'una arquitectura Big Data on es puguin emmagatzemar les diferents dades demogràfiques, garantint un sistema escalable per tal de poder anar ampliant amb tants nodes com sigui necessari tant l'espai com la potència. Per aconseguir-ho, s'han escollit algunes de les tecnologies Big Data més utilitzades actualment i s'ha n tractat dades reals de diverses poblacions catalanes.Demographic documents allow us to study a large group of behaviors in different areas such as the social and economic evolution of the past. Thanks to computer based computer vision techniques, it is intended to build historical social networks taking advantage of demographic data available. This work focuses on the implementation of a Big Data architecture where the different demographic data can be stored, guaranteeing a scalable system in order to be able to expand with as many nodes as it is necessary both space and power. To achieve this, some of the most widely used Big Data technologies have been chosen and real data from different Catalan populations have been dealt with.Los documentos demográficos permiten estudiar un gran conjunto de comportamientos en diferentes ámbitos como la evolución social y económica del pasado. Gracias a las técnicas informáticas de visión por computador se pretenden construir redes sociales históricas aprovechando los datos demográficos de las que se disponen. Este trabajo se centra en la implementación de una arquitectura Big Data donde se puedan almacenar los diferentes datos demográficos, garantizando un sistema escalable para poder ir ampliando con tantos nodos como sea necesario tanto el espacio como la potencia. Para conseguirlo, se han escogido algunas de las tecnologías Big Data más utilizadas actualmente y se han tratado datos reales de diversas poblaciones catalanas

    Similar works