Análisis tecnológico del diseño, despliegue y puesta en marcha de soluciones big data empleando Apache Spark

Martín-Doimeadios Pozo, Pedro Javier

Publication:
Análisis tecnológico del diseño, despliegue y puesta en marcha de soluciones big data empleando Apache Spark

dc.contributor.advisor	Villena Román, Julio
dc.contributor.author	Martín-Doimeadios Pozo, Pedro Javier
dc.contributor.departamento	UC3M. Departamento de Ingeniería Telemática	es
dc.date.accessioned	2019-12-16T17:57:13Z
dc.date.available	2019-12-16T17:57:13Z
dc.date.issued	2018-10
dc.date.submitted	2018-10-09
dc.description.abstract	Este proyecto está centrado en los desafíos que se tienen hoy en día y que sin duda se tendrán en los próximos años, ya que es un mercado emergente, aunque ya se ve el despunte. Todo este proceso de cambio se debe en parte a la digitalización del mundo en general. Esta digitalización de todos los servicios, de todas las empresas y sectores ha hecho que haya una necesidad de almacenar los datos. De este almacenamiento de dados nace la tecnología big data. De este almacenamiento produce una reacción de nuevas tecnologías como el Internet de las cosas (IoT) o el machine learning, ya que se obtienen datos de todo tipo de plataformas y aplicaciones, tanto móviles que han experimentado una evolución y aumento de unidades significativo, como dispositivos en los edificios públicos con los que se pretende mejorar servicios o en la navegación web en la que nuestros datos son usados para una mejora de los servicios que aplican las empresas sobre sus clientes. Por ello este proyecto se pretende desplegar y diseñar un sistema big data en un tres entornos diferentes, para ello se hará uso de Apache Spark, donde tendremos un entorno distribuido con dos nodos, un entorno pseudo-distribuido con dos nodos y un entorno Cloud basado en Apache Spark, como es Databricks. Para la realización de este trabajo, será necesario tener unos requisitos para montar el entorno que se describirán más adelante. En este proyecto se estudiará soluciones a un entorno real, como son las multas de Madrid. Por lo que estas multas deberán ser tratadas y de este tratamiento, obtendremos unos resultados que se analizarán.	es
dc.description.degree	Ingeniería Telemática	es
dc.identifier.uri	https://hdl.handle.net/10016/29362
dc.language.iso	spa	es
dc.rights	Atribución-NoComercial-SinDerivadas 3.0 España	*
dc.rights.accessRights	open access	es
dc.rights.uri	http://creativecommons.org/licenses/by-nc-nd/3.0/es/	*
dc.subject.eciencia	Informática	es
dc.subject.other	Big data	es
dc.subject.other	Optimización	es
dc.subject.other	Internet de las cosas (IoT)	es
dc.subject.other	Inteligencia artificial	es
dc.title	Análisis tecnológico del diseño, despliegue y puesta en marcha de soluciones big data empleando Apache Spark	es
dc.type	bachelor thesis	*
dspace.entity.type	Publication