Jorge.

Back

DEAP Visual Analytics: Interpretando la Fusión Multimodal de EEG con Husformer

01

Resumen General

  • Proyecto académico integral: desde el procesamiento de señales EEG/fisiológicas crudas hasta un transformer de fusión multimodal entrenado, hasta un sistema interactivo de Visual Analytics (VA) construido para interpretar ese modelo.
  • Basado en DEAP (32 participantes, 40 trials de un minuto, señales EEG + periféricas, autorreporte de Valencia/Activación/Dominancia/Agrado).
  • El entregable final es un sistema de vistas múltiples coordinadas (CMV) que permite inspeccionar las representaciones aprendidas y la atención cross-modal del modelo, no solo sus predicciones.
Resumen General
Problema y Objetivo
Pipeline de Datos: de .bdf crudo a ventanas listas para el modelo
Modelo: Fusión Cross-Modal de Husformer
Hallazgo Clave: un Sesgo Estructural de Atención
Visual Analytics — Vista A: Espacio de Representación
Visual Analytics — Vista B: Atención Temporal
Visual Analytics — Vista C: Detalle Anclado a la Señal
Aprendizajes Clave