Wilson Javier Sarmiento

Cómputo Afectivo y Realidad Virtual

Wilson Javier SarmientoGrupo de Investigación en Multimedia

Universidad Militar Nueva Granada

Retos y Experiencias

Wilson Javier Sarmiento

Retos y Experiencias

Wilson Javier SarmientoGrupo de Investigación en Multimedia

Universidad Militar Nueva Granada

Cómputo Afectivo y Realidad Virtual

Wilson Javier Sarmiento

Agenda

• Cómputo afectivo - Conceptos• Realidad Virtual - Conceptos• Cómputo afectivo + Realidad Virtual • Experiencias

Wilson Javier Sarmiento

¿Qué es?Cómputo Afectivo

Wilson Javier Sarmiento

Cómputo Afectivo – Conceptos

“A tool to improve the interface man-machine by including affective connotations”

Rosalind Picard (1995), MediaLab MIT

Affective Computing

Wilson Javier Sarmiento

Cómputo Afectivo – Conceptos

Es campo de estudio (HCI) que busca crear sistemas y dispositivos que tienen la capacidad de reconocer, interpretar y simular emociones humanas.

Wilson Javier Sarmiento

Cómputo Afectivo – Motivación

Wilson Javier Sarmiento

Usuario Emocional

Affective Computing group, MIT Media LAb

Cómputo Afectivo – RetosMalatesta, L., Karpouzis, K., & Raouzaiou, A. (2009). Affective intelligence: the human face of AI. In Artificial Intelligence An International Perspective (pp. 53-70). Springer, Berlin, Heidelberg. https://doi.org/10.1007/978-3-642-03226-4_4

Wilson Javier Sarmiento

Usuario Emocional

Comprensión Modelamiento del

Afecto

Cómputo Afectivo – Retos

Affective Computing group, MIT Media LAb

Malatesta, L., Karpouzis, K., & Raouzaiou, A. (2009). Affective intelligence: the human face of AI. In Artificial Intelligence An International Perspective (pp. 53-70). Springer, Berlin, Heidelberg. https://doi.org/10.1007/978-3-642-03226-4_4

Wilson Javier Sarmiento

Usuario Emocional

Comprensión Modelamiento del

Afecto

Medición/CensadoAfectivo

Cómputo Afectivo – Retos

Affective Computing group, MIT Media LAb

Malatesta, L., Karpouzis, K., & Raouzaiou, A. (2009). Affective intelligence: the human face of AI. In Artificial Intelligence An International Perspective (pp. 53-70). Springer, Berlin, Heidelberg. https://doi.org/10.1007/978-3-642-03226-4_4

Wilson Javier Sarmiento

Usuario Emocional

Comprensión Modelamiento del

Afecto

ReconocimientoRespuesta Afectivas

Medición/CensadoAfectivo

Cómputo Afectivo – Retos

Affective Computing group, MIT Media LAb

Malatesta, L., Karpouzis, K., & Raouzaiou, A. (2009). Affective intelligence: the human face of AI. In Artificial Intelligence An International Perspective (pp. 53-70). Springer, Berlin, Heidelberg. https://doi.org/10.1007/978-3-642-03226-4_4

Wilson Javier Sarmiento

Usuario Emocional

Comprensión Modelamiento del

Afecto

ReconocimientoRespuesta Afectivas

Medición/CensadoAfectivo

ComunicaciónAfectiva

Cómputo Afectivo – Retos

Affective Computing group, MIT Media LAb

Malatesta, L., Karpouzis, K., & Raouzaiou, A. (2009). Affective intelligence: the human face of AI. In Artificial Intelligence An International Perspective (pp. 53-70). Springer, Berlin, Heidelberg. https://doi.org/10.1007/978-3-642-03226-4_4

Wilson Javier Sarmiento

Usuario Emocional

Comprensión Modelamiento del

Afecto

InteracciónAfectiva

ReconocimientoRespuesta Afectivas

Medición/CensadoAfectivo

ComunicaciónAfectiva

Cómputo Afectivo – Retos

Affective Computing group, MIT Media LAb

Malatesta, L., Karpouzis, K., & Raouzaiou, A. (2009). Affective intelligence: the human face of AI. In Artificial Intelligence An International Perspective (pp. 53-70). Springer, Berlin, Heidelberg. https://doi.org/10.1007/978-3-642-03226-4_4

Wilson Javier Sarmiento

Usuario Emocional

Vestibles Afectivos

Comprensión Modelamiento del

Afecto

InteracciónAfectiva

ReconocimientoRespuesta Afectivas

Medición/CensadoAfectivo

ComunicaciónAfectiva

Cómputo Afectivo – Retos

Affective Computing group, MIT Media LAb

Malatesta, L., Karpouzis, K., & Raouzaiou, A. (2009). Affective intelligence: the human face of AI. In Artificial Intelligence An International Perspective (pp. 53-70). Springer, Berlin, Heidelberg. https://doi.org/10.1007/978-3-642-03226-4_4

Wilson Javier Sarmiento

Usuario Emocional

Vestibles Afectivos

Comprensión Modelamiento del

Afecto

InteracciónAfectiva

ReconocimientoRespuesta Afectivas

Medición/CensadoAfectivo

ComunicaciónAfectiva

Cómputo Afectivo – Retos

Affective Computing group, MIT Media LAbSíntesis Afectiva

Malatesta, L., Karpouzis, K., & Raouzaiou, A. (2009). Affective intelligence: the human face of AI. In Artificial Intelligence An International Perspective (pp. 53-70). Springer, Berlin, Heidelberg. https://doi.org/10.1007/978-3-642-03226-4_4

Wilson Javier Sarmiento

Usuario Emocional

Vestibles Afectivos

Comprensión Modelamiento del

Afecto

InteracciónAfectiva

ReconocimientoRespuesta Afectivas

Medición/CensadoAfectivo

ComunicaciónAfectiva

Cómputo Afectivo – Retos

Síntesis Afectiva

AplicacionesComputación Afectiva

Affective Computing group, MIT Media LAb

Malatesta, L., Karpouzis, K., & Raouzaiou, A. (2009). Affective intelligence: the human face of AI. In Artificial Intelligence An International Perspective (pp. 53-70). Springer, Berlin, Heidelberg. https://doi.org/10.1007/978-3-642-03226-4_4

Wilson Javier Sarmiento

Conceptos

Realidad Virtual

Wilson Javier Sarmiento

“Don’t think of that thing as a screen, think of it as a window, a window through which one looks into a virtual world. The challenge to computer graphics is to make that virtual world look real, sound real, move and respond to interaction in real time, and even feel real.”

Ivan SutherlandSutherland, Ivan “The Ultimate Display”, Proceedings of IFIP Congress, pp.506-508, 1965.

Realidad Virtual- Conceptos

Wilson Javier Sarmiento

Realidad Virtual- Conceptos“Virtual Reality is a high-end user interface that involves realtime simulations and interactions through multiple sensorial channels. These sensorial modalities are visual, auditory, tactile, smell, taste, [...]“

Burdea, Grigore (1993) Virtual reality systems and applications. Electro’93 Intemational Conference

Wilson Javier Sarmiento

Realidad Virtual- Conceptos

Augmented Reality (AR)

Mixed Reality (MR)Virtual Reality (VR)

Tangible User Interface (TUI)

Pejsa, T., Kantor, J., Benko, H., Ofek, E., & Wilson, A. (2016, February). Room2room: Enabling life-size telepresence in a projected augmented reality environment. In Proceedings of the 19th ACM conference on computer-supported cooperative work & social computing (pp. 1716-1725). https://doi.org/10.1145/2818048.2819965

Wilson Javier Sarmiento

Realidad Virtual- Conceptos

Augmented Reality (AR)

Mixed Reality (MR)Virtual Reality (VR)

Tangible User Interface (TUI)

S. N. Kundu, N. Muhammad and F. Sattar, "Using the augmented reality sandbox for advanced learning in geoscience education," 2017 IEEE 6th International Conference on Teaching, Assessment, and Learning for Engineering (TALE), Hong Kong, 2017, pp. 13-17, https://doi.org/10.1109/MC.2007.257

Wilson Javier Sarmiento

XR eXtended Reality

Chuah, Stephanie Hui-Wen, Why and Who Will Adopt Extended Reality Technology? Literature Review, Synthesis, and Future Research Agenda (December 13, 2018). Available at SSRN: https://ssrn.com/abstract=3300469 or http://dx.doi.org/10.2139/ssrn.3300469

Realidad Virtual- Conceptos

Wilson Javier Sarmiento

Realidad Virtual - Retos

Wilson Javier Sarmiento

Gráficas en 3DSimulaciónInteligencia artificialInteracción Humano Computado….

Modelado y animaciónRedes de datosProcesamiento de señales/imágenes/videoArquitectura de software….

Hardware

Software Interacción 3DInmersión

Realidad Virtual - Retos

Wilson Javier Sarmiento

Realidad Virtual - Retos

Interacción 3D

An Introduction to 3-D User Interface Design Doug A. Bowman , Ernst Kruijff , Joseph J. LaViola, Jr., and Ivan Poupyrev Presence: Teleoperators and Virtual Environments 2001 10:1, 96-108 https://doi.org/10.1162/105474601750182342

Wilson Javier Sarmiento

Selección

An Introduction to 3-D User Interface Design Doug A. Bowman , Ernst Kruijff , Joseph J. LaViola, Jr., and Ivan Poupyrev Presence: Teleoperators and Virtual Environments 2001 10:1, 96-108 https://doi.org/10.1162/105474601750182342

Realidad Virtual - Retos

Interacción 3D

Wilson Javier Sarmiento

Selección Manipulación

Realidad Virtual - Retos

Interacción 3D

An Introduction to 3-D User Interface Design Doug A. Bowman , Ernst Kruijff , Joseph J. LaViola, Jr., and Ivan Poupyrev Presence: Teleoperators and Virtual Environments 2001 10:1, 96-108 https://doi.org/10.1162/105474601750182342

Wilson Javier Sarmiento

Selección Manipulación

Realidad Virtual - Retos

Navegación

Interacción 3D

An Introduction to 3-D User Interface Design Doug A. Bowman , Ernst Kruijff , Joseph J. LaViola, Jr., and Ivan Poupyrev Presence: Teleoperators and Virtual Environments 2001 10:1, 96-108 https://doi.org/10.1162/105474601750182342

Wilson Javier Sarmiento

Selección Manipulación

Control del sistema

Realidad Virtual - Retos

Navegación

Interacción 3D

An Introduction to 3-D User Interface Design Doug A. Bowman , Ernst Kruijff , Joseph J. LaViola, Jr., and Ivan Poupyrev Presence: Teleoperators and Virtual Environments 2001 10:1, 96-108 https://doi.org/10.1162/105474601750182342

Wilson Javier Sarmiento

Inmersión

Realidad Virtual - Retos

D. A. Bowman and R. P. McMahan, "Virtual Reality: How Much Immersion Is Enough?," in Computer, vol. 40, no. 7, pp. 36-43, July 2007, doi: 10.1109/MC.2007.257. https://doi.org/10.1109/MC.2007.257

Wilson Javier Sarmiento

Inmersión

Realidad Virtual - Retos

D. A. Bowman and R. P. McMahan, "Virtual Reality: How Much Immersion Is Enough?," in Computer, vol. 40, no. 7, pp. 36-43, July 2007, doi: 10.1109/MC.2007.257. https://doi.org/10.1109/MC.2007.257

Wilson Javier Sarmiento

Realidad Virtual - Retos

D. A. Bowman and R. P. McMahan, "Virtual Reality: How Much Immersion Is Enough?," in Computer, vol. 40, no. 7, pp. 36-43, July 2007, doi: 10.1109/MC.2007.257. https://doi.org/10.1109/MC.2007.257

Wilson Javier Sarmiento

Realidad Virtual - Retos

D. A. Bowman and R. P. McMahan, "Virtual Reality: How Much Immersion Is Enough?," in Computer, vol. 40, no. 7, pp. 36-43, July 2007, doi: 10.1109/MC.2007.257. https://doi.org/10.1109/MC.2007.257

Wilson Javier Sarmiento

Realidad Virtual - Retos

D. A. Bowman and R. P. McMahan, "Virtual Reality: How Much Immersion Is Enough?," in Computer, vol. 40, no. 7, pp. 36-43, July 2007, doi: 10.1109/MC.2007.257. https://doi.org/10.1109/MC.2007.257

Wilson Javier Sarmiento

Realidad Virtual - Retos

D. A. Bowman and R. P. McMahan, "Virtual Reality: How Much Immersion Is Enough?," in Computer, vol. 40, no. 7, pp. 36-43, July 2007, doi: 10.1109/MC.2007.257. https://doi.org/10.1109/MC.2007.257

Wilson Javier Sarmiento

Realidad Virtual - Retos

D. A. Bowman and R. P. McMahan, "Virtual Reality: How Much Immersion Is Enough?," in Computer, vol. 40, no. 7, pp. 36-43, July 2007, doi: 10.1109/MC.2007.257. https://doi.org/10.1109/MC.2007.257

Wilson Javier Sarmiento

Sensorial

Realidad Virtual - Retos

D. A. Bowman and R. P. McMahan, "Virtual Reality: How Much Immersion Is Enough?," in Computer, vol. 40, no. 7, pp. 36-43, July 2007, doi: 10.1109/MC.2007.257. https://doi.org/10.1109/MC.2007.257

Wilson Javier Sarmiento

Sensorial

Cognitiva Sensaciones complejas• Presencia• Co-presencia• Involucramiento• Consciencia

Realidad Virtual - Retos

D. A. Bowman and R. P. McMahan, "Virtual Reality: How Much Immersion Is Enough?," in Computer, vol. 40, no. 7, pp. 36-43, July 2007, doi: 10.1109/MC.2007.257. https://doi.org/10.1109/MC.2007.257

Wilson Javier Sarmiento

¿Por qué?

+

Cómputo Afectivo+ Realidad Virtual

Wilson Javier Sarmiento

+Antecedentes

Cómputo Afectivo+ Realidad Virtual

Wilson Javier Sarmiento

+Alternativas de comunicación emocional

Cómputo Afectivo+ Realidad Virtual

Wilson Javier Sarmiento

+Cómputo Afectivo+ Realidad Virtual

Facilita modelos cognitivos