Análisis de la Información de los Tweets2

Análisis de la Información de los Tweets en la Universidad de Guayaquil usando Hive sobre Hadoop
Information Analysis of Tweets at the University of Guayaquil on Hadoop using Hive
, , ,
Universidad de Guayaquil
Facultad de Ciencias Matemáticas y Físicas
Carrera Ingeniería en Sistemas Computaciones
𝑔𝑎𝑟𝑦.𝑟𝑒𝑦𝑒𝑠𝑧@𝑢𝑔.𝑒𝑑𝑢.𝑒c
Universidad de Guayaquil
Facultad de Ciencias Matemáticas y FísicasCarrera Ingeniería en Sistemas Computaciones

Universidad de Guayaquil
Facultad de Ciencias Matemáticas y Físicas
Carrera Ingeniería en Sistemas Computaciones

Universidad de Guayaquil
Facultad de Ciencias Matemáticas y Físicas
Carrera Ingeniería en Sistemas Computaciones

Universidad de Guayaquil
Facultad de Ciencias Matemáticas y Físicas
Carrera Ingeniería en Sistemas Computaciones

Universidad deGuayaquil
Facultad de Ciencias Matemáticas y Físicas
Carrera Ingeniería en Sistemas Computaciones







Resumen
Para llevar a cabo el análisis de los Tweets y al constante crecimiento de datos que existe hoy en día en esta red Social se vuelto muy necesario la búsqueda de nuevas plataformas que nos ayuden al almacenamiento y análisis de la información, que consumen menos recursos, sean capazde ser escalables y una gran disponibilidad al momento de utilizarse. En este escrito se explicara cómo se implementara una solución para el análisis de los Tweets extraída desde API del TWITTER. Esta consista en procesar la información, implementando el data warehouse HIVE sobre la plataforma HADOOP, después de esto presentarlo en forma estadísticos y realizar en análisis correspondiente en unreporte gráfico, y esto nos demostró la capacidad, escalabilidad y menor costo que tiene esta plataforma en ejecución en comparación con otras plataformas. En el ambiente de prueba nos demostraron que un futuro exista una gran escalabilidad y un bajo costo al momento de utilizar el Framework Hive sobre Hadoop, se espera implementar el análisis de Sentimiento de Twitter en la Universidad deGuayaquil a todos sus Estudiante Tuiteros.
Palabras Claves: HIVE, HADOOP, TWITTER, escalabilidad y API.
Abstract
To perform the analysis of the tweets and constant growth of data that exists today in this network seeking new platforms that help us to storage and analysis of information, which consume fewer resources become very necessary, be able to be scalable and high availability when used. Thispaper will explain how a solution for the analysis of the tweets pulled from Twitter API implemented. This consists of processing information, implementing the data warehouse HIVE on HADOOP platform after this submission in statistical form and make corresponding analysis in a graphical report, and this showed us the capacity, scalability and lower cost than has this platform performance comparedto other platforms. In the test environment we demonstrated that there is a future high scalability and low cost when using the Hive for Hadoop Framework is expected to implement the Twitter sentiment analysis at the University of Guayaquil to all Student Twitter users.
Keywords: HIVE, HADOOP, TWITTER, scalability and API.
1. Introducción
El presente documento tiene como objetivo dar un estudiocomparativo de los tiempos de respuesta del análisis de los datos de la API TWITTER sobre un ambiente distribuido open source.
En el tiempo se han desarrollado versiones de sistemas transacciones, de gestión de datos, así mismo muchas soluciones tecnológicas, las misma que en sus primeras etapas de funcionamiento lo realizan correctamente, pero con los años el nivel de dato aumenta y cada vez seconsidera más difícil analizar en una base tradicional, estos es un problema ya que al momento de brindar el servicio o adquirir nuevas licencias estas no sean compatibles con nuestros hardware y tendríamos que cambiar toda nuestra infraestructura y ciclo se repetiría cada cierto tiempo.
Una de la ideas o investigación que realizo el grupo de Electiva III, es fragmentar toda esta información y...