.

Hideaki Matsui es un diseñador de San Francisco que hace unos meses creó Audible Color, “un instrumento audivisual. El sonido se genera basándose en colores detectados por una cámara. Rojo, verde y azul se corresponden con determinadas notas musicales. Cuando se mezclan los colores, los colores secundarios resultantes producen distintas notas. El tamaño de los colores influye en el volumen y la frecuencia de las notas. La detección de color y generación de sonido son creadas y controladas usando Processing y la librería JMyron.

Audible Color [00:01:32]

El experimento en sí ya tiene unos meses y, de hecho, lo mencionaron en Kotaku —que es donde yo lo encontré— también hace una temporada pero hasta la hace nada no lo había visto. Me recuerda un poco al tema de la sinestesia sintética de Skriabin, supongo que por estar hablando el otro día sobre el círculo de quintas y Processing.js.

.

Александр Николаевич Скрябин fue un compositor y pianista ruso del que apenas sé nada pero para eso está la Wikipedia. Nacido de una familia acomodada, plasmó su interés por la mecánica de los pianos en una afición a construirlos. Su interés lo llevó a estudiar en el Conservatorio de Moscú donde llegó a lesionarse gravemente la mano derecha. Aparentemente tenía manos muy pequeñas y la forzó practicando piezas de Liszt y Balakirev.

Anécdotas biográficas aparte, lo interesante de este personaje es lo que se le ocurrió plantear:

Though these works are often considered to be influenced by Scriabin’s synesthesia, a condition wherein one experiences sensation in one sense in response to stimulus in another, it is doubted that Alexander Scriabin actually experienced this. His colour system, unlike most synesthetic experience, lines up with the circle of fifths: it was a thought-out system based on Sir Isaac Newton‘s Opticks. Note that Scriabin did not, as far as his theory is concerned, recognize a difference between a major and a minor tonality of the same name (for example: c-minor and C-Major). Indeed, influenced also by the doctrines of theosophy, he developed his system of synesthesia toward what would have been a pioneering multimedia performance: his unrealized magnum opus Mysterium was to have been a grand week-long performance including music, scent, dance, and light in the foothills of the Himalayas that was to bring about the dissolution of the world in bliss.

¿Curioso, verdad?