![Page 1: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/1.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
1
E.T.S.I.TelecomunicaciónUniversidad de Málaga
DESARROLLO Y DISEÑO DE MUNDOS
VIRTUALES PARA LA NAVEGACIÓN A
TRAVÉS DE UN SISTEMA BCI Autor: Manuel Jesús Romero Perales Tutor: Ricardo Ron Angevín
![Page 2: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/2.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
2
Índice
Sistema BCI
Realidad Virtual y VRML
Objetivos
Herramientas utilizadas
Modelado de los mundos
Integración y pruebas
Conclusiones y líneas futuras
![Page 3: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/3.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
3
Sistema BCI
Conversor A/D
Almacen. datos
Cancelación
Artefactos
Obtención característic
as
Traducción Característic
as /Clasificación
PROCESADO SEÑAL
ADQUISICIÓN SEÑAL
Interfaz Control
Controlador
Dispositivo
APLICACIÓN
Señal digitalizada
Configuración Sistema
ComandosDispositivo
FEEDBACK
Amplif.
Sensores
Pantalla
USUARIO(Actividad cerebral)
![Page 4: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/4.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
4
Características Bidireccional
Modo de operación
Tipo de registro
Señal captada
Tarea mental a ejecutar
Tipo de feedback
Sistema BCI
Refuerzos Positivos o negativos
Reposo e imaginar movimiento
Señal EEG
Ritmos ,b [8-32Hz] Funciones motoras
Síncrono o asíncrono
Obtener y proporcionar información
Técnicas invasivas y no invasivas
![Page 5: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/5.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
5
Problemática
Sistema BCI
Técnicas biofeedback- Información proceso mental
- Concentración, motivación e inmersión
- Impacto visual
Adaptación de usuario
Evitar frustración, cansancio
Reducir tiempo respuesta
MEJORARENTRENAMIENTO
- Controlar actividad mental
- Usabilidad del sistema
- Aprendizaje no adecuado
(Realidad Virtual)
Mundos virtuales
![Page 6: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/6.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
6
Índice
Sistema BCI
Realidad Virtual y VRML
Objetivos
Herramientas utilizadas
Modelado de los mundos
Integración y pruebas
Conclusiones y líneas futuras
![Page 7: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/7.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
7
Realidad Virtual y VRML Permite generar un mundo artificial o sintético en el
cuál el usuario tiene la impresión de estar presente,
por el que puede navegar e interactuar en tiempo
real. Clasificaciones:
- Inmersiva, No inmersiva
- De proyección
- Mundo muerto
- Mundo real
- Mundo fantástico
Problemas:
- Representación
- Realimentación háptica (colisiones)
- Demora
- Malestar por uso prolongado
MUNDOS VIRTUALES
![Page 8: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/8.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
8
Realidad Virtual y VRML VRML (Virtual Reality Modelling Language)
Formato de archivo que describe objetos tridimensionales y multimedia interactivos dentro de una escena virtual
- Lenguaje de modelado (ISO/IEC 14772)
- Mundo virtual fichero *.WRL estructurado en nodos
- Objetos pueden modificarse y animarse en ejecución
- Objetos 3D y multimedia interactivos (imagen, audio, etc.) NODOS
- Visualización browsers o visores (en tiempo real).
![Page 9: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/9.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
9
Índice
Sistema BCI
Realidad Virtual y VRML
Objetivos
Herramientas utilizadas
Modelado de los mundos
Integración y pruebas
Conclusiones y líneas futuras
![Page 10: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/10.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
10
Objetivos
motivación, concentración de usuario
Diseño e implementación de mundos virtuales:
Ambientes reales, familiares o conocidos Integración con BCI existente
Respuesta en tiempo real
Vivienda
Virtual
ETSITVirtual
Simulador
Vuelo
Mejorar etapa entrenamiento
Entornos de simulación
Reforzar biofeedback
![Page 11: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/11.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
11
Índice
Sistema BCI
Realidad Virtual y VRML
Objetivos
Herramientas utilizadas
Modelado de los mundos
Integración y pruebas
Conclusiones y líneas futuras
![Page 12: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/12.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
12
Herramientas utilizadas
Software de desarrollo
Herramienta CAD: 3D Studio Max 9
- Minimizan tiempo de modelado
- Modelos detallados (mejor acabados)
Virtual Reality Toolbox (Matlab)
Equipamiento hardware
Interacción BCI – Mundo virtual
- Para modelos complejos
- PC con memoria y hardware gráfico (Pentium Core2Duo, 1Gb RAM, 256Mb tarjeta gráfica). - Polígrafo 4 canales (amplificador), tarjeta adquisición, gorro y electrodos (generador de señal).
- Conversión a VRML
![Page 13: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/13.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
13
Índice
Sistema BCI
Realidad Virtual y VRML
Objetivos
Herramientas utilizadas
Modelado de los mundos
Integración y pruebas
Conclusiones y líneas futuras
![Page 14: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/14.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
14
Vivienda virtual
Estructura de la vivienda
Texturización de estructura
Editor de Materiales (3DStudio)
Texturas Mapeo de texturas
![Page 15: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/15.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
15
Vivienda virtual
Exteriores
- Plano de suelo (césped)
- Plano de horizonte
- Semiesfera (cielo)
Visualización limitada se emplean formas sencillas (poco polígonos)
![Page 16: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/16.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
16
Vivienda virtual
Decoración interior
Elementos prediseñados
No concebidos para VRML Número de polígonos muy elevado Optimización Retexturización de mobiliario
![Page 17: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/17.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
17
Vivienda virtual
Decoración interior
Elementos diseñados (p.e. cortinas)
Resultado final
- Formas curvas aprox. triángulos- En gran número en la escena
![Page 18: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/18.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
18
ETSIT virtual
Bloques básicos
![Page 19: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/19.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
19
ETSIT virtual
Modelado de detalle
Módulo de Aulas Escaleras bajada patio
Salón de actos
Pasillos interiores Biblioteca y cafetería
Columnas
![Page 20: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/20.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
20
ETSIT virtual
Texturización PROCESO
- Realización de fotografías
- Obtención de texturas
- Almacenamiento (JGP)
- Mapeo de texturas en las geometrías
Texturas para estructura
Texturas para puertas , ventanas y decoración
Resultado final
![Page 21: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/21.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
21
Simulador de vuelo
Cambio de perspectiva de diseño
- Pocos elementos en la escena
- Una textura
- Importancia de la ubicación de los objetos
- Sensación de movimiento
Elementos de la escena
Plano de vuelo Avión
![Page 22: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/22.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
22
Simulador de vuelo
Material de textura y texturización Creación de la textura
Cuadrícula Textura definitiva (Simétrica)
Texturización del plano de vuelo
Modificar “gizmo” para obtener ciclicidad
![Page 23: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/23.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
23
Simulador de vuelo
Ubicación de los elementos
Punto de vista
PLANO
AVIÓN
![Page 24: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/24.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
24
Simulador de vuelo
Ubicación de los elementos
Resultado final
![Page 25: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/25.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
25
Iluminación de mundos
Iluminación de Vivienda y ETSIT
- Luz principal (“Omni” o PointLight) SOL
- 3 luces de apoyo (SpotLight ) menor intensidad
Iluminación Simulador
- Una fuente de luz (DirectionalLight)
![Page 26: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/26.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
26
Índice
Sistema BCI
Realidad Virtual y VRML
Objetivos
Herramientas utilizadas
Modelado de los mundos
Integración y pruebas
Conclusiones y líneas futuras
![Page 27: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/27.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
27
Integración
Integración y pruebas
- Paso previo adecuación de los mundos modelados:
- Incorporar sensores de proximidad
- Conversión a VRML
Nodo VRML “silla”
- Integración de la Interfaz de navegación en el mundo virtual.
Punto de Vista
o Cámara
Interfaz NC Interfaz CI
![Page 28: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/28.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
28
Integración con Vivienda y ETSIT
Integración y pruebas
- El interfaz no controla la “silla”.
- Punto de vista y avión inmóviles.
- Implementación de movimiento
- Avance , giros, ascenso y descenso.
Integración con Simulador de Vuelo
- Virtual Reality ToolBox.
![Page 29: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/29.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
29
Pruebas
Integración y pruebas
Visualización de mundos Respuesta correcta
OBJETIVOS
- Escalado
- Respuesta en tiempo real visualización continuada
- Colisiones con objetos y estructuras
- Animación de la escena al seleccionar un movimiento
![Page 30: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/30.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
30
Índice
Sistema BCI
Realidad Virtual y VRML
Objetivos
Herramientas utilizadas
Modelado de los mundos
Integración y pruebas
Conclusiones y líneas futuras
![Page 31: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/31.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
31
Conclusiones
Conclusiones y líneas futuras
- Desarrollo y diseño de mundos virtuales:
- Representan ambientes reales y conocidos.
- Refuerzan biofeedback del usuario.
- Limites de exploración los impone el usuario.
- Entornos de simulación y evaluación seguros.
- Potente herramienta de modelado, limitada por VRML.
![Page 32: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/32.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
32
Líneas futuras
Conclusiones y líneas futuras
- Aumentar inmersión del usuario
- Incrementar interactividad entre objetos
Involucrar más sentidos
Experimentación simultanea
Colisiones encadenadas
- Impresión más realista de los mundos OpenGL o DirectX
Visión estereoscópica
![Page 33: Proyecto Fin de Carrera Departamento de Tecnología Electrónica 1 E.T.S.I.Telecomunicación Universidad de Málaga DESARROLLO Y DISEÑO DE MUNDOS VIRTUALES](https://reader035.vdocumento.com/reader035/viewer/2022070416/5665b43a1a28abb57c9028fe/html5/thumbnails/33.jpg)
Proyecto Fin de CarreraDepartamento de Tecnología Electrónica
33
E.T.S.I.TelecomunicaciónUniversidad de Málaga
DESARROLLO Y DISEÑO DE MUNDOS
VIRTUALES PARA LA NAVEGACIÓN A
TRAVÉS DE UN SISTEMA BCI Autor: Manuel Jesús Romero Perales Tutor: Ricardo Ron Angevín