Professional Documents
Culture Documents
2002
En un instrumento acstico, la interfaz de juego est intrnsecamente volumen necesario para mantenerse en movimiento de ida y vuelta,
ligada a la fuente de sonido. cadena de un violn es tanto parte del inclinndose ms bien como un violn visibles cin. He observado el efecto
mecanismo de control y el generador de sonido. Puesto que son que esto tuvo en m mismo y los dems jugadores improvisadas en la
inseparables, las conexiones entre los dos son complejos, sutiles y habitacin. Debido a la necesidad de mantenerse en movimiento, se senta
determinada por leyes fsicas. Con los instrumentos electrnicos e como si su propia energa era directamente responsable del sonido. Cuando
informticos, la situacin es totalmente diferente. La interfaz es se detuvo, se detuvo. Las sutilezas del movimiento inclinndose dieron una
generalmente una pieza completamente separada del equipo de la fuente textura compleja a la amplitud. Nos 'enganchados'. Tard bastante tiempo al
de sonido. Esto significa que la relacin entre ellos es a determinar. El premio de cada persona lejos del instrumento, ya que era muy atractivo.
arte de la conexin de estos dos, tradicionalmente inseparable, Regres en el plazo de una semana y sealar la irona de que el "error"
componentes de un sistema musical en tiempo real (una tcnica haba sido corregida, borrado de notas del estudiante, y la forma tradicional
La importancia de la cartografa
En esta seccin destacamos el efecto dramtico que el estilo de mapeo
puede tener en 'darle una interfaz para la vida'. Nos centramos en nuestra
propia experiencia en el diseo de instrumentos musicales digi- tales y
comentarios en varios diseos ante- rior. Una extensa revisin de la literatura
Amp
disponible sobre la cartografa de la msica por ordenador ha sido
presentada por los autores en [6], [16] y [17].
osc
Frec
Las observaciones informales
El primer autor ha llevado a cabo una serie de experimentos en la
cartografa. El ms formal de estos han sido pre-tantes en detalle en [5] y
[3], y se resumen ms adelante en este documento. Comencemos con
algunos bastante simple, pero
Figura 1. Cartografa simple para el Experimento 1
Actas de la Conferencia de 2002 sobre nuevos instrumentos para la Expresin Musical (NIME-02), Dubln, Irlanda, 24-26 de mayo de, 2002
Para investigar ms a fondo constru un simple experimento. La interfaz Los experimentos de mapeo
para este experimento consista en dos deslizadores en un mdulo MIDI, y Varias investigaciones formales se han llevado a cabo por los autores con
la fuente de sonido era un solo oscilador con controles de amplitud y el fin de explorar la esencia y el efecto de esta capa de asignacin
frecuencia. En la primera ejecucin del experimento el mapeo era misteriosa.
simplemente uno-a-uno, es decir, un control deslizante controla
mapeo complejo para las interfaces arbitrarias
directamente el volumen, y el otro controla directamente el terreno de juego
(vase la figura 1). El primer autor realiz una investigacin en la psicologa y la viabilidad de
diversas interfaces de actuacin musical en tiempo real [3]. La parte
principal de este estudio tom la forma de grandes series de
Dej que varios sujetos de prueba jugar libremente con el instrumento, y
experimentos para determinar el efecto que tuvo configuracin de la
habl con ellos despus. En la segunda pasada experimental, la interfaz
interfaz de la calidad y la precisin de desempeo de un jugador
fue re-configurado para emular el mencionado 'Theremin accidental ".
humano. La tesis completo est disponible para su descarga en lnea
Un control deslizante
[15], y los detalles de la teora, experimentos y re- sultados han sido
necesitaba ser movido con el fin de hacer el sonido; la velocidad de cambio de
publicados [5]. Se resumen a continuacin, con el fin de dar una visin
movimiento controlado amplitud del oscilador. Pero decid complicar las cosas (a
general de sus implicaciones para las estrategias de mapeo.
propsito!) Para estudiar el efecto que esto tuvo en los usuarios. El lanzamiento,
que estaba controlada principalmente por la primera corredera, operado 'al revs' a
las expectativas de la mayora de las personas (es decir, empujando hacia el
control deslizante hacia arriba baj el tono). Se utilizaron tres interfaces, y stos se describen ahora. La primera interfaz
Adems, el (vase la Figura 3) representa una interfaz de edicin de msica tpica equipo
se utiliz segunda corredera (siendo movido para el control de la amplitud) para con controles deslizantes en pantalla conectados uno-a-uno para cada
compensar ligeramente el terreno de juego - es decir, era de acoplamiento cruzado a parmetro de sonido.
cambio
Amp
Invertir
Velocidad de
osc
+
Escala Frecuencia
Figura 2. Mapeo de complejo para el Experimento 2 de nuevo conectados de una manera uno-a-uno para la unidad de sntesis.
NIME02-02
Actas de la Conferencia de 2002 sobre nuevos instrumentos para la Expresin Musical (NIME-02), Dubln, Irlanda, 24-26 de mayo de, 2002
Estas pruebas utilizaron tres estrategias de mapeo de contraste, con una interfaz
de usuario fijo y el algoritmo de sntesis. Las asignaciones fueron;
una serie de grficos para comparar el efecto - con el tiempo - de cada de energa del usuario como en b). Estas asignaciones se utilizan para controlar
interfaz. Estos resultados cuantitativos se pueden resumir de la interfaz los parmetros de un algoritmo de sntesis FM estreo, incluyendo amplitud, la
ellos en persona Estas pruebas pusieron de relieve las diferencias entre una interfaz eral de
arroyos. Muchos usuarios comentan cmo el "como un instrumento" que era, o propsito gnero, (como el ratn), que tiene asignaciones simples, pero
"la forma expresiva" sentan que poda estar con ella. permite al usuario comenzar a trabajar al instante, y una interfaz con
mapeos ms complejos que se deben practicar y explorar con el fin de
lograr salida verdaderamente expresiva.
Centrndose en el efecto de las estrategias de asignacin
NIME02-03
Actas de la Conferencia de 2002 sobre nuevos instrumentos para la Expresin Musical (NIME-02), Dubln, Irlanda, 24-26 de mayo de, 2002
WX7
instrumento de cal y manteniendo la interfaz (un controlador MIDI
aliento
off-the-shelf) y la fuente de sonido sin cambios, la calidad esencial del dinmicas (Y)
expresivas.
aliento
vibrato (X, relativa)
del labio
Estudios previos, en particular por Buxton [2], presentaron evidencia de que los
dispositivos de entrada con caractersticas similares (por ejemplo, nmero de grados
de libertad) podra dar lugar a situaciones de aplicacin muy diferente dependiendo
de la forma en que estas caractersticas fueron dispuestos en el dispositivo. En ese la presin del labio
dinmicas (Y)
respirar el
dinmicas (Y) de
fundamental (X, absoluta)
de entrada, y se gener sonido utilizando modelos de sntesis aditiva de la presin del labio
vibrato (X, relativa) frecuencia
(X, absoluta)
Otro punto qued claro en este proceso: incluso si el WX7 era un modelo fiel de un
- Mediante la deconstruccin de la forma en que funciona la caa de hecho, se
saxofn que proporciona los mismos tipos de variables de control (la respiracin,
observ que la eleccin de la correspondencia podra ser importante como una
la presin de los labios y de digitacin), estas variables trabajaron totalmente independientemente
variable pedaggica. De hecho, en marcado contraste con los instrumentos
acsticos, donde las dependen- cias entre los parmetros son inalterables,
en el controlador MIDI, mientras que son acoplamiento cruzado
acoplamiento cruzado entre las variables puede ser fcilmente creado o disminuye
en instrumentos acsticos solo-caa. Este acoplamiento cruzado natural es
stroyed en los instrumentos musicales digitales. Esto significa que los artistas
el resultado del comportamiento fsico de la caa, y puesto que el
podran centrarse en aspectos especficos del instrumento, definiendo
equivalente "reed" en el controlador era una pieza de plstico que no vibre,
explcitamente su comportamiento. las opciones posibles podran incluir:
y por otra parte no se acopl a una columna de aire, las variables eran
simplemente independiente.
NIME02-04
Actas de la Conferencia de 2002 sobre nuevos instrumentos para la Expresin Musical (NIME-02), Dubln, Irlanda, 24-26 de mayo de, 2002
MODELOS Y DIRECTRICES PARA como "frecuencia portadora, 'amplitud de la portadora', 'frecuencia de modulacin",
Al tratar de responder a esta pregunta de cmo extender una solucin de Caso 2: imaginemos que una capa de mapeo ya ha sido ideado para abstraer
cartografa especfica para un caso ms general, se propone un modelo de las entradas de parmetros tales como "energa", "distancia entre los
asignacin para instrumentos musicales digitales en [13]. Se basa en la deslizadores ', la" oscilacin ", etc. Tambin imaginemos que hay una capa de
separacin de la capa de asignacin en dos capas independientes, acoplado asignacin antes de que la unidad de sntesis de FM, que proporcionan
por un conjunto intermedio de (o "abstracto") los parmetros definidos por el entradas de control de nivel superior, tales como "brillo", "terreno de juego",
usuario. Este modelo fue presentado en el marco de un conjunto de "nitidez", etc. Ahora podemos imaginar el diseador de hacer una relacin
extensiones jMax ms tarde conocido como ESCHER (en realidad, un conjunto como "controles de brillo de energa". En la superficie esto puede parecer ser
de objetos desarrollado por Norbert Schnell para llevar a cabo la interpolacin otra asignacin uno a uno. De hecho, es - en el conceptual nivel. Sin embargo,
utilizando modelos aditivos). Esta idea se basa en trabajos anteriores, tales cuando la consideren cmo "energa" se calcula a partir de las entradas dadas,
como los de Mulder et al. [9], Metois [8], y Wessel [18]. Una direccin similar y cmo 'brillo' tiene que ser convertido en las primitivas de sntesis FM, se dar
fue presentado por Mulder y Fels en [10] y ms tarde por Garnett y cuenta de cmo muchos de los parmetros de nivel inferior han sido
Goudeseune [7]. Bsicamente, todos estos trabajos han utilizado los niveles acoplamiento cruzado. As, los modelos de asignacin de nivel de muchos son
ms altos de abstraccin como estructuras de control en lugar de las variables una forma de sim- plificar el proceso de diseo, y de ayudar a que el diseador
de sntesis primas tales como am- amplitudes, frecuencias y fases de los para centrarse en el efecto final de la asignacin, as como proporcionar un
parciales de sonido sinusoidales. El punto principal realizado en [13] fue mtodo conveniente de sustitucin de dispositivo de entrada o el mtodo de
pensar explcitamente unos dos capas separadas de mapeo y las estrategias sntesis.
para poner en prctica estos, y no en la eleccin de los parmetros de
intermedio a s mismos, ya sea perceptiva, geomtrica o "abstracto" [14].
uno-a-uno asignaciones en la construccin de una interfaz. Podemos utilizar esta lo ha sido inherentemente presente en los instrumentos acsticos cortesa de
tendencia a mejorar el proceso de mapeo si utilizamos los muchos modelos los fenmenos fsicos naturales. Ahora que tenemos la capacidad de disear
en capas descritos anteriormente. El escenario siguiente puede ilustrar instrumentos con los controladores separables y fuentes de sonido, tenemos
esto: Imagnese un sistema cuyas entradas interfaz incluidos "botn 1", "2 que disear de forma explcita la conexin entre los dos. Esto se est
botn '' de cursor 1 ', corredera 2', 'ratn x' y 'ratn y'. Supongamos que el convirtiendo en una tarea no trivial. Estamos en las primeras etapas de la
sistema de sntesis era un mdulo de modulacin de frecuencia con comprensin de las complejidades de la forma en que la capa de asignacin
NIME02-05
Actas de la Conferencia de 2002 sobre nuevos instrumentos para la Expresin Musical (NIME-02), Dubln, Irlanda, 24-26 de mayo de, 2002
(Y la jugabilidad) de un instrumento electrnico por su intrprete. Lo que Anlisis gesto en Max / FTS. En Kansei, la tecnologa de la
sabemos es que es una capa muy importante, y uno que no debe ser emocin. Actas del Taller Internacional AIMI, A. Camurri (ed.)
pasado por alto por los firmantes mento de nuevos instrumentos. Gnova: Associazione Italiana di Informatica Musical, Octubre
3-4, pp 87-91.. (1997)
Referencias
[10] Mulder, A., y Fels, S. sonido Sculpting: Manipulacin de sonido a
[1] Arfib, D. Comunicacin Personal. (2002) [2] Buxton, W. Hay ms
travs de escultura virtual. En Proc. del Simposio occidental
interaccin que sus Ojos: Algunos Problemas de la entrada manual. En
ordenador Grficos de 1998 pp. 15-
Norman, D. a. y Draper, SW (eds), Diseo Centrado en el usuario del
23. (1998)
sistema: Nuevas perspectivas sobre la Interaccin Persona-Ordenador,
proyecto [11] El RIMM en tiempo real multimedia interactivo. (2001) Pgina
Web: http://www.york.ac.uk/res/rimm/
Hillsdale, NJ: Lawrence Erlbaum Associates, 319-337. (1986)
[12] Rovan, JB, Wanderley, MM, Dubnov, S., y Depalle, P.
Instrumental gestual planificacin de las estrategias como la
[3] Hunt, A. Interfaces de usuario radicales para control en tiempo real musical. DPhil
expresividad Determinantes de rendimiento Computer Music. En Kansei,
tesis, Universidad de York, Reino Unido. (1999)
la tecnologa de la emocin. Actas del Taller Internacional AIMI, A.
Camurri (ed.) Gnova: Associazione Italiana di Informatica Musical,
[4] Hunt, A. y Wanderley, MM (eds.) Asignacin de variables de control a
Octubre 3-4, pp 68-73.. (1997) [13] Wanderley, MM, Schnell, N. y
variables musicales. Sistemas Interactivos y diseo del equipo en el
Rovan, J. Escher - Modelado y escnicas "Instrumentos
Grupo de Trabajo de la msica. (2000) Pgina Web:
compuestas" en tiempo real. En Proc. Conferencia Internacional
IEEE sobre Sistemas, Hombre y Ciberntica (SMC'98),
http://www.notam02.no/icma/interactivesystems/mapping.html [5] Hunt, A.,
y Kirk, R. planificacin de las estrategias de interpretacin musical. En M. y
M. Wanderley Battier (eds.)
San Diego, CA, pp. 1080-1084. (1998) [14] Wanderley, MM, y
Tendencias en el control gestual de la msica. IRCAM - Centre Pompidou.
Depalle, P. Controlado gestuel de la synthse sonore. En H. Vinet
(2000)
y F. Delalande (eds.) Interfaces Hombre-Mquina y Creacin
[6] Hunt, A., Wanderley, MM, y Kirk, R. Hacia un Modelo de Asignacin
Musical -
de Instrumental en interaccin con la msica de Expertos. En Proc. de la Hermes Ciencia Publishing, pp. 145-163. (1999) [15] Wanderley, MM
Conferencia Internacional de la Msica Computer 2000. San Francisco,
(ed.) Sistemas Interactivos y diseo del equipo de msica de grupo de
CA: International Computer Music Association, pp. 209-211. (2000) [7]
trabajo. (2000) Pgina Web: http://www.notam02.no/icma/interactivesystems/wg.html
Garnett, G., y C. Goudeseune. Factores de rendimiento de control de los
espacios de alta dimensin. En Proc. de la Conferencia Internacional de
[16] Wanderley, MM Interaccin-Instrumento intrprete. Aplicacin al
la Msica de ordenador de 1999. San Francisco, CA: International
control gestual de sntesis de sonido. Tesis doctoral. Universidad de Pars
Computer Music Association, Pp. 268 - 271. (1999) [8] Metois, E. Musical
VI, Francia. (2001) [17] Wanderley, MM, ed. Las estrategias de mapeo en
Informacin de sonido: gestos musicales y Sistemas de incrustacin. Tesis
tiempo real Computer Music. Problema especial. sonido organizado 7 (2).
doctoral. MIT Media Lab. (1996)
Para aparecer en agosto de 2002. [18] Wessel, D. Espacio Timbre como
una estructura de control musical. Computer Music Journal, 3 (2): 45-52.
(1979)
NIME02-06