Improving User Evaluations in Multisensory Environments through the Integration of Physiological Signals

Nome: ALEPH CAMPOS DA SILVEIRA

Data de publicação: 24/03/2025

Banca:

Nomeordem decrescente Papel
ANDRE GEORGHTON CARDOSO PACHECO Examinador Interno
CELSO ALBERTO SAIBEL SANTOS Presidente
DIEGO ROBERTO COLOMBO DIAS Examinador Interno
MYLÈNE CHRISTINE QUEIROZ DE FARIAS Examinador Externo
WINDSON VIANA DE CARVALHO Examinador Externo

Resumo: Os sistemas multimídia tradicionais envolvem predominantemente visão e audição, mas a
interação humana envolve vários sentidos. O Mulsemedia, mídia multissensorial, avança
nesse paradigma ao integrar estímulos táteis, térmicos, olfativos e outros sincronizados
com o conteúdo audiovisual para criar experiências imersivas. Avaliar a experiência do
usuário (UX) e a qualidade da experiência (QoE) em tais ambientes apresenta desafios
únicos, incluindo complexidades na sincronização sensorial, efeitos de mascaramento
ambiental e limitações de métodos subjetivos, como questionários, que podem ter vieses
e interromper a imersão. Esta pesquisa aborda esses desafios ao propor uma estrutura
de avaliação aprimorada fisiologicamente que combina métricas fisiológicas objetivas (por
exemplo, frequência cardíaca, resposta galvânica da pele) com feedback subjetivo para
descobrir estados cognitivo-emocionais latentes e refinar a integração sensorial. Por meio
de experimentos em vídeos de 360 graus, jogos sérios e cenários térmico-hápticos, sinais
fisiológicos revelaram discrepâncias entre a tolerância relatada e a tensão subconsciente,
como maior excitação durante a dessincronização audiovisual não detectada pelos auto-
relatos, além de expor ineficiências em sistemas sensoriais estáticos. Os resultados defendem
o monitoramento de biossinais em tempo real e o alinhamento sensorial dinâmico para
otimizar o realismo imersivo e a precisão avaliativa. Ao conectar percepção subjetiva com
respostas fisiológicas, este trabalho estabelece uma estrutura multimodal para avaliação
holística de UX, permitindo um design multimídia adaptativo e personalizado. Direções
futuras enfatizam a integração de diversos biossensores, análise baseada em aprendizado
de máquina e protocolos padronizados para avançar metodologias de avaliação preditiva
centradas no usuário em ecossistemas multissensoriais em evolução.

Acesso ao documento

Acesso à informação
Transparência Pública

© 2013 Universidade Federal do Espírito Santo. Todos os direitos reservados.
Av. Fernando Ferrari, 514 - Goiabeiras, Vitória - ES | CEP 29075-910