Fótos (Páginas francesas) Prensa francesa
Algunos extractos mp3 en nuestra rúbrica música (Pigmalión)

Comme cela vous chante
"ópera Interactiva"

El proyecto

El objetivo no consiste en realizar en síntesis una miniópera tradicional, sino en proponer una interferencia de imágenes, sonidos, movimientos donde los personajes reales: público, intérpretes obran recíprocamente con un medio ambiente virtual de bailarinas, caras e imágenes de síntesis dotadas de determinada autonomía de comportamientos.

En el espíritu de la ópera barroca, presentamos los primeros elementos de una "máquina del virtual": conjunto de efectos visuales y sonoros que deberían sorprender, por su naturaleza y por su creación interactiva.

Interactividad

Producción de "vocales sonoras":
El público inicia la ópera en la dirección de su elección, una persona da un tema por una frase en un micrófono al principio de cada escena. Esta frase de acceso repetida por uno o varias caras de síntesis, desencadenará rápidamente un volumen sonoro de los cantos, para eso se analizará en tiempo real, produciendo una consecuencia de vocales que serán cantadas por las caras de síntesis, y sido acompañadas por la verdadera cantante. Una otra frase otorgada por el público u otorgada por el programa, conducirá a la conclusión de la escena

Dirección del conjunto:
Una barra realizada con un captador magnético de tipo "flock of bird" permitirá al "director de orquesta" dirigir cada diferente cara: lanzar el canto o detenerlo, desencadenar o fijar de las animaciones o fondos sonoros.

Interacción multimodal del ballet:
Las bailarinas de síntesis tienen una doble interacción: con la música y con el público. Comunican por medio de un cinturón de captadores de movimiento, con toda persona del público moviéndose o bailando, y también con el sonido, cuyos parámetros pueden utilizar distintos: por ejemplo la amplitud, la velocidad, las frecuencias.

Ficha científica

El proyecto "Ópera Interactiva" agrupa una serie de investigaciones en torno a un temas general, la de la interacción creativa y < < inteligente >> de usuarios con personajes de síntesis y contenido musical.
Se trata de desarrollar un medio ambiente virtual, es decir, un universo 3D, incluyendo ser artificiales de toda clase, en particular de los protagonistas de síntesis más cercanos posibles de un ser humano, capaces de incluir el medio ambiente, de tener comportamientos, de hablar, cantar, bailar, expresar emociones, comunicar entre ellos y con los participantes en la escena. Tal conjunto articula necesidades de modelización, de simulación de movimientos, de comprensión y de reconocimiento, así como de la evolución instantáneamente interactividad y, amigos también de las relaciones con las ciencias humanas y cognoscitivas.

Entre real y virtual, se trata de establecer interfaces, de desarrollar sistemas que vayan bien más allá del simple cierre de acción-reacción inmediato, pero integran mecanismos finos de aprendizaje, de reconocimiento una reciente búsqueda del equipo, llevada por Michel Bret y Maria- Hélène Tramus, mostró cómo las redes neuronales podían enriquecer la interacción de un ser humano "usuario" con una bailarina de síntesis.

Tal como ocurre con la ópera tradicional que asocia teatro, danza y música, nuestro equipo trabaja sobre la animación facial, la animación del cuerpo, el tratamiento de la música y el sonido y su asociación a la imagen en el marco de un medio ambiente 3D virtual.

La voz está en el centro del proyecto, en todos sus aspectos. Es el elemento federalista del medio ambiente contemplado, de la voz recogida y analizada de un orador a la síntesis con una voz cantada, de la voz a la animación de la cara, con la voz al movimiento del cuerpo.

Este proyecto cruza una serie de temas de investigación:

  • del punto de vista de la animación en imágenes de síntesis: la articulación y la deformación de la cara en situación de elocución normal y en situación de canto;
  • desde el punto de vista del análisis/síntesis sonora: la síntesis sobre las vocales, el análisis de la entonación de un orador- espectador;
  • el punto de vista del reconocimiento de la palabra y su tratamiento "inteligente": la extracción y la agregación de palabras clave;
  • desde el punto de vista de lanimation synthètique del cuerpo: la relación del canto (en términos musicales como semánticos) al movimiento;
  • la navegación en mundos virtuales que asocian formas sonoras y formas visuales, permitiendo "agarrar" y dirigir sonidos y "formas" musicales.

 

Nuestro planteamiento se dedica a la creación de interfaces entre seres humanos y seres artificiales capaces de simular comportamientos emocionales y reactivos, y de manera más general, a la creación de medio ambiente virtual en que de nuevas experimentaciones sensorias vendrían tranfo nuestra relación a la imagen

Contacto: los participantes al proyecto

Ballet : Michel Bret, Marie-Hélène Tramus

Caras : Hervé Huitric, Monique Nahas

Música : Alain Bonardi, Nathalie Dazin

Libreto: Jocelyne Kiss

Distribución artística
Cupidon: Jocelyne Kiss
Céphise: Bérénice Hennebois
Pigmalión:Pierre-Adam Gilardot
Arpista: Tatiana Drogna

 


Prensa