El diseño de interacción sónica es el estudio y la explotación del sonido como uno de los principales canales de transmisión de información , significado y cualidades estéticas / emocionales en contextos interactivos. [1] [2] de Sonic diseño de interacción está en la intersección de diseño de interacción y de sonido y la computación de la música . Si el diseño de interacción se trata de diseñar objetos con los que las personas interactúan, y tales interacciones se facilitan por medios computacionales, en el diseño de interacción sónica, el sonido está mediando la interacción, ya sea como una exhibición de procesos o como un medio de entrada.
Áreas de investigación
Estudio perceptivo, cognitivo y emocional de las interacciones sónicas.
La investigación en esta área se centra en los hallazgos científicos experimentales sobre la recepción del sonido humano en contextos interactivos . [3]
Durante las interacciones de circuito cerrado, los usuarios manipulan una interfaz que produce sonido y la retroalimentación sónica afecta a su vez la manipulación de los usuarios. En otras palabras, existe un estrecho acoplamiento entre la percepción auditiva y la acción. [4] Escuchar sonidos podría no solo activar una representación de cómo se hizo el sonido: también podría preparar al oyente para reaccionar al sonido. Las representaciones cognitivas de sonidos pueden estar asociadas con esquemas de planificación de acciones, y los sonidos también pueden indicar inconscientemente una reacción adicional por parte del oyente. [5]
Las interacciones sónicas tienen el potencial de influir en las emociones de los usuarios : la calidad de los sonidos afecta la agradabilidad de la interacción y la dificultad de la manipulación influye en si el usuario se siente en control o no. [6]
Diseño de sonido del producto
El diseño de productos en el contexto del diseño de interacción sónica se trata de métodos y experiencias para diseñar productos interactivos que tengan un comportamiento sónico sobresaliente. Los productos, en este contexto, son objetos tangibles y funcionales que están diseñados para ser manipulados, [7] [8] o simulaciones utilizables de tales objetos como en la creación de prototipos virtuales . La investigación y el desarrollo en esta área se apoya en estudios de otras disciplinas, tales como:
- producto de calidad de sonido ; [9]
- ecología acústica , es decir , la relación, mediada a través del sonido, entre los seres vivos y su entorno ;
- sonido de película ; [10]
- sonido de videojuegos y ordenadores ; [11]
- cultura del sonido , es decir , el estudio de cómo la producción y el consumo de sonido han cambiado a lo largo de la historia y dentro de las diferentes sociedades.
En la investigación del diseño de productos sónicos, se ha heredado un conjunto de prácticas de una variedad de campos. Estas prácticas han sido probadas en contextos donde la investigación y la pedagogía se entremezclan naturalmente. Entre estas prácticas basta mencionar:
- bodystorming , especialmente cuando se combina con bocetos vocales, [12] donde los participantes producen imitaciones vocales para imitar el comportamiento sónico de los objetos mientras interactúan con ellos;
- prácticas teatrales, como metáforas teatrales y representaciones dramáticas; [13]
- diseño básico, [14] basado en demostraciones e intersubjetividad ;
- creación de prototipos de vídeo [15] con superposiciones sónicas;
- arte foley en la realización de películas ; [dieciséis]
- representando dramas sonoros. [17]
Arte y música interactivos
En el contexto del diseño de interacción sónica, los proyectos interactivos de arte y música están diseñando e investigando experiencias estéticas donde la interacción sónica está en el centro. Los aspectos creativos y expresivos, la estética, son más importantes que transmitir información a través del sonido. Las prácticas incluyen instalaciones, actuaciones, arte público e interacciones entre humanos a través de objetos / entornos aumentados digitalmente. Estos a menudo integran elementos como tecnología integrada, dispositivos sensibles a los gestos, altavoces o sistemas sensibles al contexto .
La experiencia está en el foco, abordando cómo los humanos se ven afectados por el sonido y viceversa. El arte y la música interactivos permiten a los investigadores cuestionar los paradigmas y modelos existentes de cómo los humanos interactúan con la tecnología y el sonido, yendo más allá de los paradigmas de control (el ser humano controla una máquina). Los usuarios son parte de un ciclo que incluye acción y percepción.
Los proyectos interactivos de arte y música invitan a acciones de exploración y participación lúdica. También hay un aspecto multisensorial, especialmente el audio háptico [18] y los proyectos audiovisuales son populares. Entre muchas otras influencias, este campo está informado por el desarrollo de los roles de fabricante de instrumentos, compositor e intérprete que se fusionan. [19]
La investigación artística en el diseño de interacción sónica se trata de producciones en las artes interactivas y las artes escénicas , explotando el papel del compromiso enactivo con objetos interactivos con sonido aumentado. [20]
Sonificación
La sonificación es la generación de sonido dependiente de los datos, si la transformación es sistemática, objetiva y reproducible, de modo que pueda utilizarse como método científico. [21]
Para el diseño de interacción sónica, la sonificación proporciona un conjunto de métodos para crear sonidos de interacción que codifican datos relevantes, de modo que el usuario pueda percibir o interpretar la información transmitida. La sonificación no tiene por qué representar necesariamente grandes cantidades de datos en sonido, sino que solo puede transmitir uno o unos pocos valores de datos en un sonido. Para dar un ejemplo, imagine un interruptor de luz que, al activarse, crearía un sonido corto que depende de la energía eléctrica consumida a través del cable: más lámparas que desperdician energía tal vez resulten sistemáticamente en sonidos de interruptor más molestos. Este ejemplo muestra que la sonificación tiene como objetivo proporcionar cierta información mediante su transformación sistemática en sonido.
La integración de elementos basados en datos en el sonido de interacción puede tener diferentes propósitos:
- para permitir a los usuarios refinar sus acciones a través de retroalimentación auditiva. Ejemplo: la máquina de perforación mejorada por sonificación [22] que indica por sonido cuando se alcanza una orientación deseada hacia la pared.
- para influir en cómo los humanos perciben su propio movimiento corporal. [23]
- para crear una gestalt sónica para la interacción que permita a los usuarios comparar el rendimiento detallado en interacciones repetidas: por ejemplo, los golpes de remo se pueden sonificar para que los deportistas puedan sincronizar mejor su acción.
- para habilitar funciones novedosas que de otro modo no estarían disponibles (por ejemplo, una botella que muestra por sonido la cantidad de líquido que se vierte en los vasos para que los usuarios puedan llenar más fácilmente la misma cantidad de líquido en diferentes vasos).
Dentro del campo de la sonificación, el diseño de interacción sónica reconoce la importancia de la interacción humana para comprender y utilizar la retroalimentación auditiva . [24] Dentro del diseño de interacción sónica, la sonificación puede ayudar y ofrecer soluciones, métodos y técnicas para inspirar y guiar el diseño de productos o sistemas interactivos.
Ver también
|
|
|
Referencias
- ^ Davide Rocchesso, Stefania Serafin, Frauke Behrendt, Nicola Bernardini, Roberto Bresin, Gerhard Eckel, Karmen Franinović, Thomas Hermann, Sandra Pauletto, Patrick Susini y Yon Visell, (2008). Diseño de interacción sónica: sonido, información y experiencia . En: CHI '08 Extended Abstracts on Human Factors in Computing Systems (Florencia, Italia, 5 al 10 de abril de 2008). CHI '08. ACM, Nueva York, NY, 3969–3972. doi : 10.1145 / 1358628.1358969
- ^ Davide Rocchesso y Stefania Serafin, (2009). "Diseño de interacción sónica". Editorial de número especial. International Journal of Human-Computer Studies 67 (11) (noviembre de 2009): 905–906. doi : 10.1016 / j.ijhcs.2009.09.009
- ^ Guillaume Lemaitre, Olivier Houix, Yon Visell, Karmen Franinović, Nicolas Misdariis y Patrick Susini, (2009). "Hacia el diseño y evaluación de sonido continuo en interfaces tangibles: El Spinotron". International Journal of Human-Computer Studies 67 (11) (noviembre de 2009): 976–993. doi : 10.1016 / j.ijhcs.2009.07.002
- ^ Salvatore M. Aglioti y Mariella Pazzaglia (2010). "Representar acciones a través de su sonido". "Experimental Brain Research" 206 (2): 141-151. doi : 10.1007 / s00221-010-2344-x
- ^ Marzia De Lucia, Christian Camen, Stephanie Clarke y Micah M. Murray (2009). "El papel de las acciones en la discriminación de objetos auditivos". "Neuroimage" 48 (2): 475–485. doi : 10.1016 / j.neuroimage.2009.06.041
- ^ Guillaume Lemaitre, Olivier Houix, Karmen Franinović, Yon Visell y Patrick Susini (2009). "El vidrio Flops: un dispositivo para estudiar las reacciones emocionales derivadas de las interacciones sónicas". En Proc. Conferencia de Informática de Sonido y Música, Oporto, Portugal. Disponible: [1]
- ^ Daniel Hug (2008). Genio en una botella: reconfiguraciones de objetos y sonidos para productos interactivos . En: Proceedings of Audiomostly 2008, 3rd Conference on Interaction With Sound (2008). Disponible: online
- ^ Karmen Franinović, Daniel Hug y Yon Visell (junio de 2007). Sound Embodied: Exploraciones del diseño de interacción sónica para objetos cotidianos en un entorno de taller . En: Actas de la 13ª Conferencia Internacional sobre Visualización Auditiva, Montreal, Canadá, 26 al 29 de junio de 2007, págs. 334–341. Disponible: online
- ^ Richard H. Lyon, (2003). "Calidad de sonido del producto, desde la percepción hasta el diseño". Sonido y vibración 37 (3): 18–22. Disponible: online
- ^ Ver filmsound.org: Espacio de aprendizaje dedicado al arte del diseño de sonido cinematográfico
- ^ Ver Acerca de gamesound.org
- ^ Inger Ekman y Michal Rinott, (2010). Uso de bocetos vocales para diseñar interacciones sónicas , Aarhus, Dinamarca: archivo Designing Interactive Systems, Actas de la 8ª Conferencia ACM sobre diseño de sistemas interactivos, ISBN 978-1-4503-0103-9 . Disponible: online .
- ^ Sandra Pauletto, Daniel Hug, Stephen Barrass y Mary Luckhurst (2009). Integración de estrategias teatrales en el diseño de interacción sónica . En: Proceedings of Audio Mostly 2009 - 4th Conference on Interaction with Sound (2009), Glasgow, 6 p. Disponible: PDF Archivado 2011-08-27 en Wayback Machine y en línea
- ^ Davide Rocchesso, Pietro Polotti y Stefano delle Monache, (28 de diciembre de 2009). "Diseño de interacción sónica continua". Revista Internacional de Diseño 3 (3). Disponible: online y PDF
- ^ Wendy E. Mackay y Anne Laure Fayard, (1999). Lluvia de ideas y creación de prototipos en vídeo: técnicas para el diseño participativo , Pittsburgh, Pensilvania: Conferencia sobre factores humanos en sistemas informáticos, resúmenes ampliados de CHI '99 sobre factores humanos en sistemas informáticos, ISBN 1-58113-158-5 . Disponible: online
- ^ Michel Chion, (1994). Audio-Vision: sonido en pantalla . Nueva York: Columbia University Press, ISBN 0-231-07898-6 , ISBN 0-231-07899-4 . Reseña de libro en f ilmsound.org
- ^ Daniel Hug, (2010). "Investigación de estrategias de diseño de sonido narrativo y performativo para productos interactivos". Lecture Notes in Computer Science , Volumen 5954/2010: 12-40, doi : 10.1007 / 978-3-642-12439-6_2 . Disponible: en línea Archivado el 17 de diciembre de 2012 en archive.today .
- ^ El quinto taller internacional sobre diseño de interacción háptica y de audio (HAID) del 16 al 17 de septiembre de 2010 en Copenhague, Dinamarca. http://media.aau.dk/haid10/?page_id=46
- ^ Conferencia internacional sobre nuevas interfaces para la expresión musical http://www.nime.org/
- ^ John Thompson, JoAnn Kuchera-Morin , Marcos Novak, Dan Overholt, Lance Putnam, Graham Wakefield y Wesley Smith, (2009). "El Allobrain: Un mundo virtual inmersivo, interactivo, estereográfico, de audio 3D". International Journal of Human-Computer Studies 67 (11) (noviembre de 2009): 934–946. doi : 10.1016 / j.ijhcs.2009.05.005
- ^ Sonificación: una definición http://sonification.de/son/definition
- ^ Tobias Grosshauser y Thomas Hermann, (2010). "Interacción hombre-máquina de bucle cerrado multimodal" Proc. Taller interactivo de sonificación, Estocolmo, http://interactive-sonification.org/ISon2010/proceedings
- ^ Effenberg, Alfred O. (2005). "Sonificación del movimiento: efectos sobre la percepción y la acción". IEEE Multimedia . 12 (2): 53–59. doi : 10.1109 / MMUL.2005.31 . S2CID 5211383 .
- ^ Thomas Hermann y Andy Hunt, (2005). "Introducción de los editores invitados: una introducción a la sonificación interactiva". IEEE MultiMedia 12 (2): 20-24. doi : 10.1109 / MMUL.2005.26
Otras lecturas
- Franinović, K. y Serafin, S., Eds. Diseño de interacción sónica . The MIT Press, Cambridge, Massachusetts, 2013.
- Stefano Delle Monache, Pietro Polotti, Davide Rocchesso (2010). Un kit de herramientas para exploraciones en el diseño de interacción sónica . En: Actas de la 5a Conferencia sobre todo en audio: Conferencia sobre interacción con el sonido, 2010, Nueva York (AM '10), ISBN 978-1-4503-0046-9 , doi : 10.1145 / 1859799.1859800 , cita
- Eoin Brasil y Mikael Fernström, (2009). Diseño de pantalla auditiva con base empírica . En: Proceedings of the SMC 2009 - 6th Sound and Music Computing Conference, 23-25 de julio de 2009, Oporto, Portugal. Disponible: online .
- Karmen Franinović, Yon Visell, Daniel Hug, (2007). Sound Embodied: un informe sobre el diseño de interacción sónica en artefactos cotidianos . En: Actas de la 13ª Conferencia Internacional sobre Visualización Auditiva, Montreal, Canadá, 26 al 29 de junio de 2007. Disponible: en línea .
- Ernest A. Edmonds, Alastair Weakley, Linda Candy, Mark Fell, Roger Knott y Sandra Pauletto, (2005). "El estudio como laboratorio: combinando la práctica creativa y la investigación en tecnología digital". Revista Internacional de Estudios Hombre-Máquina 63 (4-5): 452-481. Disponible: online .
- Ernest Edmonds, Andrew Martin y Sandra Pauletto, (2004). Interfaces audiovisuales en arte digital . En: Actas de la Conferencia Internacional ACM SIGCHI de 2004 sobre los avances en la tecnología del entretenimiento informático (ACE '04), Singapur, 3 al 5 de junio de 2004, págs. 331–336, doi : 10.1145 / 1067343.1067392 . Disponible: online .
- Thomas Hermann y Andy Hunt, (2004). La importancia de la interacción en la sonificación . En: Actas de la Décima Reunión de la ICAD de la Conferencia Internacional sobre Visualización Auditiva, Sydney, Australia, del 6 al 9 de julio de 2004. Disponible: en línea .
- Niklas Röber y Maic Masuch, (2004). Interactuar con el sonido: un paradigma de interacción para mundos auditivos virtuales . En: Actas de la Décima Reunión de la ICAD de la Conferencia Internacional sobre Visualización Auditiva, Sydney, Australia, del 6 al 9 de julio de 2004. Disponible: en línea .
enlaces externos
|
|