Also available in English

Inf@Vis!

La revista digital de InfoVis.net

Visualizando la Música
por Juan C. Dürsteler [mensaje nº 161]

La música se ha hecho para oírla y para sentirla. La notación musical añadió cierta forma de visualizarla, pero nunca como ahora hemos tenido tantas posibilidades de ver su estructura y la naturaleza de las relaciones entre sus estilos y sus piezas individuales.

En el número 37 hablamos ya de la auralización, el uso del sonido para representar información. Hablábamos allí de los audíconos, breves fragmentos de audio que indican ciertas situaciones (un error de programa, por ejemplo).

Aquí nos interesamos más por la visualización de la información relativa a la música y con la visualización de la música misma que en el uso de la música para “oír” y discernir patrones subyacentes en la información. 

WinMediaVidaFresa.gif (224838 bytes) MusicPlasmaEnyia.gif (158307 bytes) ShapeMusEnya.gif (101110 bytes)
Entretenimiento visual . Muchos reproductores de audio se acompañan de sistemas de visualización que "danzan" al compas de la música. En este caso Windows Media Player 
Fuente
:  Captura de pantalla por el autor
Pulse sobre la imagen para agrandarla
Similitud musical. Tal como aparece en Musicplasma un buscador visual de interpretes y estilos musicales. Vease el texto más abajo para más información.
Fuente
:  Captura de pantalla tal como se ve en la web
Pulse sobre la imagen para agrandarla
Estructura de la música. En el ejemplo la pantalla principal de "The Shape of Song" que muestra la estructura de una pieza musical, junto con el valor y duración de las notas. También se puede escuchar la pieza.
Fuente:  Captura de pantalla tal como se ve en la web
Pulse sobre la imagen para agrandarla

La visualización de la música tiene varios aspectos prominentes en cuanto al uso que se está haciendo de ellos:

  • Etretenimiento visual.

  • Búsqueda de patrones de similitud musical. 

  • Visualización de la estructura de piezas musicales.

Entretenimiento Visual

En este contexto consideramos como entretenimiento visual las figuras cambiantes que podemos encontrar en distintos reproductores, por ejemplo en Winamp, Windows Media Player y otros reproductores que “bailan” visualmente siguiendo la música. 

WinAmp.gif (217684 bytes) WinAmp2.gif (198201 bytes) WinAmp3.gif (152436 bytes)
Algunas capturas de pantalla de distintos pasajes de una misma canción vistos a traves de distintas visualizaciones en Winamp 5.0. 
Fuente:  Captura de pantalla tal como se ve en el reproductor
Pulse sobre la imagen para agrandarla

Típicamente utilizan una representación del espectro de frecuencias que produce la pieza en cuestión en cada momento, combinándolo con distintos efectos que lo distorsionan. Su objetivo es puramente estético, aunque, en rigor, la información “esta ahí”, aunque la usemos solo para nuestro placer visual.

Búsqueda de similitud musical.

MusicPlasmaEnyiaZoom.gif (173257 bytes)
Musicplasma. Una vez se introduce el nombre de nuestro cantante preferido, esta aplicación proporciona un mapa de los autores más relacionados con el mismo. 
Fuente
:  Captura de pantalla por el autor
Pulse sobre la imagen para agrandarla

Más interés práctico tiene la identificación de la similitud entre distintas piezas y estilos musicales. Imaginemos que nos gustaría buscar música parecida al estilo de un particular intérprete o grupo musical. El nombre de los intérpretes no nos dice nada si no los hemos escuchado previamente. Sin embargo distintos tipos de música comparten características comunes. 

Musicplasma presenta un mapa en el que se agrupa a los interpretes por épocas y estilos enlazados por líneas, de forma que cuanto más cercanos están dos interpretes tanto más próximos están sus estilos y o épocas. 

Cada interprete está representado por un círculo (que ellos denominan “halo”) de tamaño proporcional a su popularidad o a la fuerza con que representa un estilo. 

Musicplasma da muy poca información sobre cuál es la tecnología sobre la que se basa. De hecho da muy poca información sobre la codificación de colores o sobre casi cualquier cosa que nos pueda interesar sobre el. 

Según cuenta John Battelle Musicplasma utiliza los resultados de filtraje colaborativo de Amazon.com (otros compradores de X han comprado también Y, Z y W...) para agrupar por estilos y otorgar popularidad a los elementos de su búsqueda.

De hecho bien podríamos decir que Musicplasma es a la búsqueda musical lo que KartOO o Grokker son a la búsqueda textual.

Visualización de la estructura

En el extremo de la sofisticación (y de la potencia y posibilidades para el futuro) está la visualización de la estructura de la música misma. Un ejemplo especialmente atractivo y elegante es “The Shape of Song” construido por Martin Wattenberg, autor del Map of the Market de SmartMoney que está basado en la tecnología de los Treemaps. 

Este excelente trabajo es la aplicación a la música de los Diagramas en Arco (Arc Diagrams). Este tipo de diagramas tienen su origen en la búsqueda de cadenas que se repiten dentro de una serie de datos secuencial. La música es un ejemplo claro de una serie secuencial, donde la variable que gobierna la secuencia es el tiempo. La música es, además un buen ejemplo de cómo se pueden conseguir melodías complejas a base de combinar repeticiones de pasajes musicales (subestructuras) más sencillos.

En un diagrama en arco, las cadenas que se repiten, sean de un solo elemento o de varios, están unidas por un arco de círculo. La anchura del arco abarca la longitud de la secuencia repetida, de forma que las cadenas largas repetidas se exhiben como arcos anchos, mientras que las secuencias cortas, o las notas individuales, se exhiben como arcos más finos. 

ShapMusEstructura.gif (7855 bytes) ShapMusMazurka.gif (22213 bytes)
Estructura de una pieza elemental . Se puede apreciar como los arcos identifican notas individuales que se repiten y grupos enteros de notas que se repiten en distintas partes de la pieza. 
Fuente
:  Captura de pantalla tal como se ve en la web The Shape of Song
Pulse sobre la imagen para agrandarla
Una Mazurca de Chopin. Se puede apreciar en este caso la complejidad y riqueza de la pieza así como las iteraciones de determinados pasajes.
Fuente
:  Captura de pantalla tal como se ve en la web The Shape of Song
Pulse sobre la imagen para agrandarla

Esta visualización tan sencilla conceptualmente revela de un vistazo, sin embargo, la estructura de una melodía o de una compleja pieza, como puede ser una Mazurca de Chopin, una cantata de Bach o una simple canción infantil.

La extracción de la estructura, sea en esta forma o bien atendiendo a las variaciones de la frecuencia del sonido, la distribución espectral de intensidades u otras técnicas más sofisticadas abren otro paso a la búsqueda de similitudes, de forma que es posible relacionar piezas con parecida estructura notacional o de frecuencias, lo que abre, a su vez puertas a la visualización de estilos musicales. Esto es lo que pretende, por ejemplo, el proyeto SIMAC, (Semantic Interaction with Music Audio Contents).

Incidentalmente The Shape of Songs permite oir la música presente en su catalogo de ficheros MIDI.

La música forma parte integrante de nuestras vidas. Como ocurre con tantas otras cosas los ordenadores e Internet han cambiado también nuestra relación con ella. No quizá en la parte profunda de nuestra relación, la transmisión o, quizá más apropiadamente, la evocación de sentimientos, sino en la accesibilidad a la misma y en la comprensión de su estructura. 

Ahora podemos también “ver” la música en la estructura de una canción y en sus relaciones con las demás.

Enlaces de este artículo:

http://www.infovis.net/printMag.php?num=37&lang=1   Número 37 Auralización
http://www.musicplasma.com   La web de Musicplasma
http://battellemedia.com/archives/001163.php   El blog de John Battelle
http://www.infovis.net/printMag.php?num=155&lang=1   Número 155 Filtraje Cooperativo
http://www.infovis.net/printMag.php?num=138&lang=1   Número 138 Grokker, o la Navegación Visual
http://www.infovis.net/printMag.php?num=97&lang=1   Número 97 KartOO
http://www.turbulence.org/Works/song/   Web de The Shape of Song
http://www.bewitched.com/   La web de Martin Wattenberg
http://www.infovis.net/printMag.php?num=52&lang=1   Número 52 La Evolución de los Treemaps
http://domino.research.ibm.com/cambridge/research.nsf/0/e2a83c4986332d4785256ca7006cb621/$FILE/TR2002-11.pdf   Artículo sobre Arc Diagrams
http://www.semanticaudio.org/   La web de SIMAC
© Copyright InfoVis.net 2000-2018