1 / 9

j esus.salido@uclm.es

j esus.salido@uclm.es. SAINET: UNA APLICACIÓN MÓVIL DE PROCESAMIENTO DE IMAGEN EN CONTEXTOS DE INTERACCIÓN SOCIAL PARA ASISTENCIA A PERSONAS INVIDENTES J. Salido, O. Déniz y G. Bueno Grupo VISILAB ETS Ing. Industriales, Ciudad Real. Objetivo.

sen
Download Presentation

j esus.salido@uclm.es

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. jesus.salido@uclm.es SAINET: UNA APLICACIÓN MÓVIL DE PROCESAMIENTO DE IMAGEN EN CONTEXTOS DE INTERACCIÓN SOCIAL PARA ASISTENCIA A PERSONAS INVIDENTES J. Salido, O. Déniz y G. Bueno Grupo VISILABETS Ing. Industriales, Ciudad Real

  2. Objetivo […] solución móvil que proporcione, a un invidente, una realimentación sonora con información de las claves no verbales de la interacción socialen el puesto de trabajo […] número de personas presentes frente a él y la posición de éstas (ángulo y distancia estimada) […] • Especificación: • App con realimentación sonora • Solución discreta autónoma no invasiva

  3. Requisitos de la App auricular • Hardware: • smartphone con cámara trasera • auricular bluetooth A2DP • Software: • Android 4.0+, • motor de síntesis de voz TTS (Ivona), • librería de procesamiento de imagen (OpenCV) cámara smartphone

  4. ¿Qué hace la App SAINET? Informa, bajo demanda y mediante voz, del nº de personas presentes en la escena y su ubicación (izda., centro, dcha./próxima, cercana, lejana) • División de escena en 3 regiones • Detección combinada de rostros + torsos • Relación entre área de detección y distancia Mayor área en sujetomás cercano

  5. Ciclo de Pruebas • Desarrollo con participación un usuario invidente • Proyecto piloto de pruebas en Experimentos Entrevistas Nuevafuncionalidad Superacióndebilidades Análisis • Detección mixta rostros/torsos • Notificación bajo demanda • Discretización de distancia • Detección de sonrisa • Algoritmo de detección • Notificación continua • Percepción de distancia • Influencia de condiciones App

  6. Vídeo-Demo

  7. Conclusiones • Adecuada discretización de la escena • Efectiva notificación textual bajo demanda • Robustez con detección combinada: torsos + rostros • Degradación de detección con movimiento de cámara y/o sujetos en escena • Necesidad de activación manual (bajo demanda) de la notificación • Posición, poco natural, del terminal sobre el torso

  8. Ampliaciones y mejoras • Detección de estados emocionales • Detección automática de textos y lectura bajo demanda • Empleo de hardware específico • “Reidentificación” de personas registradas • Detección de obstáculos en la vía pública indetectables por métodos tradicionales (toldos, papeleras, mobiliario,…) cámara

  9. Gracias por su atención (cont.)

More Related