Sistema big data para el análisis de rutas de taxis en NYC

Con el incipiente aumento de los datos informáticos que se generan en la actualidad surge el término big data. Las herramientas convencionales utilizadas hasta el momento no son capaces de soportar los grandes volúmenes de datos, por lo que se tiene que recurrir a las nuevas tecnologías del momento. El uso de las tecnologías de información más avanzadas permite la búsqueda de respuestas en el menor tiempo posible, lo que conlleva la necesidad del tratado de los datos de forma rápida. Muchas organizaciones ya recurren a estas herramientas, ya que a parte de la velocidad en la respuesta les permite analizar y obtener conocimiento a partir de todo el conjunto de datos que poseen. Además, tienen la posibilidad de realizar la toma de decisiones en tiempo real y mejorando así sus estrategias de negocio. La aplicación del big data se realiza en multitud de sectores, y en este proyecto el sector central es el de tráfico. Se ha hecho un estudio del diseño de un posible sistema big data que ofrece al usuario la capacidad de cargar, procesar y visualizar los datos de entrada al sistema con las tecnologías Hadoop y Hive. En esta memoria se comienza dando una visión general de la motivación del problema al que se pretende dar solución, seguida de unos capítulos introductorios a la tecnología empleada en el desarrollo. Posteriormente, se expone el diseño y los pasos seguidos en la implementación del sistema continuando con las pruebas de rendimiento. Finalmente, se concluye con las conclusiones de la realización y la planificación y presupuesto del proyecto.In the recent years, increasing computer data has given rise to the big data term. Conventional tools used so far are not able to support large volumes of data, so you have to resort to new technologies of the moment. Start using the most advanced information technologies allows searching for answers in the shortest time possible, which means that data processing must be fast. Many organizations already use these tools, which offer them the response speed and it allows them to analyze and gain knowledge from the entire set of data held. Additionally, they have the ability to make decisions in real time and thus improving their business strategies. The application of big data is done in many sectors and specifically this project is included in the traffic sector. We performed a study of the design of a possible big data system that gives users the ability to upload, process and display the data input to the system with Hadoop and Hive technologies. This document is divided into several parts. Firstly, the project's motivation and context are explained and continues with some chapters of introduction to the technology to be used in the project. After that, the design and implementation of big data system are described. In addition, the performance testing is also explained. Finally, it ends with conclusions, stages of development and the project budget.Ingeniería en Tecnologías de Telecomunicació