Implementación de un Framework de Big Data para el análisis de sentimientos en redes sociales por medio de Apache Spark

Abstract

Las redes sociales son una herramienta para conocer las opiniones y preferencias del público, y la información contenida en las publicaciones de los usuarios es invaluable. Un framework de análisis de sentimiento de redes sociales es implementado a través de Apache Spark, para conocer la apreciación de los usuarios de estas redes respecto a determinada marca, entidad o temática. Se diseña la arquitectura general del framework, analizando los requerimientos a través de historias de usuarios y generando tres diseños: alto nivel, bajo nivel e interfaz. En el diseño de alto nivel se produce un diagrama de actividades que define el flujo de trabajo del framework. El diseño de bajo nivel genera un diagrama de actividades con mayor nivel de detalle que el primero. El diseño de interfaz es una propuesta inicial de la interfaz gráfica para el usuario final. El proceso de implementación se documenta de manera detallada. Se analizan los problemas de librerías existentes y las alternativas tomadas para sortear los inconvenientes. Se incluye la programación realizada y la modificación a librerías de terceros. Se desarrollan pruebas unitarias en paralelo a la implementación. El comportamiento del framework es evaluado a través de una prueba de integración, se analizan los resultados de dichas evaluaciones y se plantean modificaciones para la implementación de futuras versiones.