Publication:
Desarrollo de una aplicación con acceso oral para dispositivos móviles Android

Loading...
Thumbnail Image
Identifiers
Publication date
2015-05
Defense date
2015-07-30
Tutors
Journal Title
Journal ISSN
Volume Title
Publisher
Impact
Google Scholar
Export
Research Projects
Organizational Units
Journal Issue
Abstract
El objetivo principal de este trabajo PFC es el desarrollo de una aplicación “Asistente Turístico avanzado que combina la Realidad Aumentada con sistemas de dialogo multimodal en teléfonos inteligentes Android”. Una aplicación que usando la cámara a modo de ventana proporciona un valor añadido del entorno que rodea al usuario, mezclando realidad virtual con realidad. Esto es posible mediante el GPS y los fotogramas recibidos con la cámara. La aplicación analiza los datos y es capaz de mostrar los puntos de interés turísticos (PDIs) que rodean al usuario. El usuario puede seleccionar un PDIs y realizar preguntas de forma oral y la aplicación las contesta por el mismo canal. También podrá acceder a la acceder a la información existente en internet del PDI. La aplicación incluye las funcionalidades para la detección y representación de objetos mediante cámara y geo-posicionamiento del usuario, además de las funcionalidades necesarias de interacción oral para acceder/consultar información de los objetos. Estas características proporcionan un valor añadido sobre el entorno del usuario. El programa hace uso de las tecnologías de SW actuales, sistema operativo Android, librería de Realidad Aumentada (Wikitude.com), reconocimiento y síntesis de voz (SpeechToText y Speech Recognition), bases de datos (SQLite), lenguajes de programación Java, HTML 5, JavaScript y SQL dotándola de flexibilidad, calidad y eficiencia. El Trabajo Fin de Carrera se complementa con un análisis detallado de la Realidad Aumentada en los sistemas móviles, centrándose especialmente en Android. Estos estudios se han realizado con el objetivo de sacar el mejor rendimiento a la aplicación y completar con facilidad y éxito el desarrollo de la aplicación.
The main goal of the Final Project Career is the development of an application “advanced turistic assistant that combines Augmented Reality with multimodal dialog in Android Smartphones”. With the camera as an out-world window the applicatión provides information about the user’s environment. This can be done with the GPS device and camera frames. The application analizes this data and shows the turistic points of interest (POIs) that surround the user. Users can select a POI, and get information about the POI asking by voice, then the application replies also by voice. Also the application opens a browser with the wikipedia of the POI and the most relevant google results. The application includes the functionality for the detection and representation of objects using camera and geo-positioning of the user, furtheremore the oral interaction capabilities necessary to access / view information objects. These features provide added value for the user's environment. The program make use of the latest software tecnologies like, Android Operative System, Augmented Reality (Wikitude), Synthesis and voice recognition, data bases (SQLite), and latest programming lenguages as Java, HTML 5, Java Script and SQL, providing quality, flixibility, and eficiency. The Project is complemented with a detailled analysis of the Augmented Reality on mobile systems, especially focussing in Android. These studios has been performed in order to get the best performance for the application
Description
Keywords
Desarrollo de aplicaciones, Android (Sistema operativo), Dispositivos móviles, Realidad aumentada, Realidad virtual
Bibliographic citation