Viernes CIUP

Tecnologías de información y creación artística: la

evolución de la coreografía con computadoras durante

el último medio siglo

“Information Technology and the Arts: The Evolution of Computer

Choreography during the Last Half Century,” Dance Chronicle, vol. 42

(2019) , no. 1, pp. 1-52

Francisco Sagasti

Lima, 22 marzo 2019

Estructura de la presentación

• Introducción: interacciones entre las tecnologías de la

información y la creación coreográfica

• Inicios de la coreografía con computadoras (decenio de

1960)

• Avances y desarrollos limitados: 1970-2000

• Punto de inflexión: decenio de 2000

• Desarrollos en el siglo 21:– La tecnología entra al escenario

– Algoritmos genéticos e inteligencia artificial

• Ciencia y tecnología como metáforas: más allá de la

coreografía con computadoras

• Iniciativas contemporáneas

• Inteligencia artificial y creatividad humana

• Comentarios finales

Introducción

• Antecedentes:– Ada de Lovelace (colaboradora de Charles Babbage): “el motor

analítico teje patrones algebraicos”; especulaciones sobre el uso

del motor analítico para componer música (en 1840s)

– Especulaciones de Alan Turing sobre computadoras e inteligencia

artificial (1940-1950s)

• Complejidad del movimiento del cuerpo humano para

codificarlo adecuadamente

• Posibilidad de usar computadoras en la creación y

performance de la danza: reacciones tecnofóbicas y

tecnofílicas

• Coreografía y danza: campo privilegiado para explorar

las relaciones entre tecnología y creatividad

Tipos de coreografía con computadoras

1. Computers and information technology in the process of creating and performing choreography

1.1 Record, preserve, recall, analyze and teach dances and choreography

1.2 Assist and enhance the choreography design process indirectly off-stage: use computer programming languages, genetic algorithms, and artificial programs to explore options and decide on movements to design choreography in advance of performance1.3 Complement or substitute the choreographer

2. IT designed and controlled lightning, sound or mechanical devices interacting with performing dancers

2.1 Directly on stage: video or sensors on dancer’s bodies to capture, process and project real time movement on stage, directly or mediated by a human dance jockey; dance jockeys giving on-stage instructions to the performers, TV camera operators, musicians, etc. by modulating computer generated dance movements in real time.2.2 Indirectly off stage: design in advance lighting, sound and virtual dancers to accompany, complement, enhance and interact with performing dancers

3. Computer, physical and biological sciences as metaphors to create choreography, and choreography as a stimulus for philosophical speculation

3.1 Use scientific concepts to inspire choreographic designs

3.2 Choreography as an entry point to examine consciousness and ephemerality

4. Information technology-mediated real-time audience participation in the creation and performance of choreographies and dances

Los inicios de la coreografía con computadoras

en el decenio de 1960

• Jeanne Beaman, Anne Hutchinson (1964-1966):

experimentos en Pittsburgh y Londres con uno o dos

bailarines

• Michael Noll (1966-1967): uso de monitores para mostrar

movimiento de bailarines generados por computadoras en

Bell Telephone Labs

• Francisco Sagasti y William Page (1967-1968): diseño de

un progama de computadoras con FORTRAN IV para definir

movimientos espaciales de bailarines. Puesta en escena en

marzo de 1968.

• Rasgo común: uso de generadores de números al azar con

reglas de selección

• Desplazamiento de bailarines: FORTRAN IV (números al

azar + reglas de selección)

• Armonía general y música: Coreógrafo (Reifsneider)

• Motivación: bailarines (sátira amorosa)

El experimento de Sagasti y Page (1968)

10 11 12 13

98765

1 2 3 4

Dancer No 3

TIME POSIT TIME POSIT

1 6 8 7

2 6 9 2

3 6 10 2

4 7 11 2

5 7 12 2

6 7 . .

7 7 . .Downstage (front)

Upstage (back)

El experimento de Sagasti y Page (1968)

El experimento de Sagasti y Page (1968)

Computadoras en el registro, anotación y

reproducción de danza

• Sistemas de notación para registrar movimientos del cuerpo

humano:– Rudolf Laban (1920s en adelante): choreutics, Labanotation

– Benesh, Eshkol-Wachman

– Sistemas híbridos; adaptaciones ad hoc; registro de tiempo y

movimientos (Taylor, ingeniería industrial)

• Uso de cámaras de video

• Automatización del análisis de registro de videos.

• Limitaciones:– Complejidad

– Insuficiencia

– Dificultad de enseñar y utilizar

– Interacción con música

• Esfuerzos y desarrollos para superar limitaciones

Coreografía y computadoras en escenario

• Trabajos académicos en universidades: Simon Frazer,

Pennsylvania, Sydney, Waterloo, Iowa, etc.

• Landsown (Inglaterra, 1970s); Cordeiro (Brasil, 1970s);

Politis (1980s, reseña de más de 100 artículos)

• Ungvary et al (1980-1990s): integración de música y danza,

uso de criterios derivados de la música para definir

coreografías

• Bradford & Cóté-Laurence (1990s): sistema de experto con

“rule setter” y “dance maker”

• De Sola (1990s): uso de software “LifeForms” y proyección

en el escenario con improvisación en el marco de un diseño

coreográfico previo

• Potencial demostrado, pero limitaciones técnicas

Siglo 21: La tecnología de la información irrumpe en la escena coreográfica

• Ley de Moore

• Punto de inflexión: miniaturización de componentes

electrónicos (microchip): mayor disponibilidad, capacidad,

potencia, empleabilidad

• Registro ”semiautomático” del movimiento del cuerpo

humano, procesamiento de información (400

imágenes/segundo)

• Posibilidad de interacción en tiempo real entre bailarines,

dispositivos electrónicos y programas de computadora:– Integración de bailarines, imágenes, música, objetos y robots,

cámaras y proyección de videos

– Exploraciones más allá de uso de números al azar y reglas

William Forsythe: One Flat Thing, reproduced

(2006)

William Forsythe: One Flat Thing, reproduced

(2006)

William Forsythe: One Flat Thing, reproduced

(2006)

Kate Sicchio: Hacking choeography (2012)

Lapointe, “Choreogenetics: the generation of choreographic variants through genetic mutations and

selection” (2005)

Input sequence (a), and variants of the choreogeneticsalgorithm, generated by:(b) Repetition (c) Translocation, and (d) Conversion

Lapointe & Epoque, “The Dancing Genome

Project” (2005)

Catálisis creativa: algoritmos genéticos, inteligencia artificial

• Proliferación de iniciativas y experimentos; gran variedad

de opciones y posibilidades

• Algoritmos genéticos:– Uso de secuencia inicial (madre); especificación de reglas para

generar variaciones; definición de criterios de selección;

presentación de resultados (automáticos, semiautomáticos); decisión

final sobre diseño de la danza (coreógrafo, bailarines, “dance-

jockey”, objetos)

• Inteligencia artificial– Definición de reglas de aprendizaje, sin que necesariamente

intervengan seres humanos; corridas del programa a lo largo del

tiempo; definición de criterio de aprendizaje; uso de metáforas e

insumos biológicos

• McGregor & Downie; Ventura; Jadhav; Donahue et al

McGregor & Downie: Choreographic language agent (2004-2013)

McGregor & Downie: Choreographic language agent (2004-2013)

McGregor & Downie: Choreographic language agent-Atomos (2013)

Ventura: “Algorithmic Reflections on

Choreography” (2016)

Jadhav et al.: “Art to Smart: An Automated

Bharatanatyam Dance Choreography” (2015)

Jadhav et al.: “Art to Smart: An Automated Bharatanatyam Dance Choreography” (2015)

Donahue et al: Dance Dance Revolution

(2017)

• Conceptos de la física y dispositivos tecnológicos, han sido

fuente de inspiración coreográfica

• Streb: ideas de gravedad, impacto y mecánica sofisticada

han inspirado sus creaciones

• Armitage: “¿Cómo hacer que el ballet se parezca a la física

moderna? ... Ese es mi trabajo, capturar su poesía.” Uso de

incertidumbre, caos, relatividad, mecánica cuántica y teoría

de cuerdas.

• Miller & Tobin: Visita a Fermilab, ballet Principios de

incertidumbre

• Schiphorst: sensores de movimiento, respiración, sonidos y

tacto alimentan programas de coreografía

• Criterios estéticos dominan proceso creativo

Ciencia y tecnología como metáforas para la composición coreográfica

Iniciativas contemporáneas en coreografía generada por computadoras

• Compañía Forsythe: Choreography Coding Lab

• De Boer; Tarr: Apps para diseñar coreografía en teléfonos

inteligentes y tabletas

• Monbot & Bardainne en colaboración con Merzouki: Diseño

interactivo de imágenes, iluminación y movimiento en

sincronía con los bailarines

• McGregor (“Autobiografía”): uso de su DNA como insumo

para un programa de inteligencia artificial para diseñar

una variedad casi infinita de coreografías que se estrenan

en cada función

• Bleeker/Noë: carácter efímero de la danza, existe sólo en

su ejecución, nunca es igual, desaparece continuamente;

liberarse el hábito, desorganizarnos

Choreographic Coding Lab – Motion Bank

Talleres en:

• Frankfurt 2013

• Berlin 2014

• Melbourne, Frankfurt,

New York, Los Angeles

2015

• Auckland, Belo

Horizonte 2016

• Amsterdam,

Nairobi2017

• Bratislava, Mainz

2018

Choreographic Coding Lab (2013-2018)

Pixels - Mourad Merzouki, Adrian Mondot and

Claire Bardienne (2017)

Inteligencia artificial y creatividad humana

•Sagasti y Page (1970): coreógrafo instruyendo a un programa de computadoras para que genere opciones, escoger y descartar, repetir el proceso: el programa “aprende” el estilo del coreógrafo.

•Superar tecnofobia y tecnofilia: justo medio ente amenazas y posibilidades

•No asumir que la inteligencia artificial avanza inteligencia humana se queda estancada

•Creatividad humana se amplifica con avances tecnológicos y viceversa: palanqueo mutuo hacia estados superiores de creatividad artística

•Corporalidad intrínseca de la inteligencia humana: la inteligencia artificial (basada en sílice) nunca igualará a la inteligencia humana (basada en carbón)

Inteligencia artificial y creatividad humana

•Posibles desarrollos futuros:

–Sensores de movimiento, ambiente, sonido, signos vitales, etc. integrados en tiempo real en la función

–Programas de inteligencia artificial para trabajar en tándem con el coreógrafo, aprendizaje mutuo

–Composición y coordinación en escena de música, iluminación y movimiento (coreógrafo como director de orquesta)

–Captura, procesamiento, distorsión, amplificación de imágenes en el escenario con los bailarines y otros objetos (robots, hologramas, etc.)

–Interacción de bailarines reales y virtuales a distancia, ubicados en otro lugar, en el escenario al mismo tiempo

–Sensores neuronales que permiten “pensar” movimientos e integrarlos a la coreografía; participación de la audiencia con imágenes virtuales en tiempo real

Comentarios finales

•Hace medio siglo pusimos en escena uno de los primeros experimentos de coreografía con computadoras

–Intentamos anticipar el futuro: nos quedamos increíblemente cortos

–La irrupción de un nuevo nivel ontológico: la realidad virtual rompe la dualidad moderna mente/cuerpo; crea una tríada que está aún por explorarse en profundidad, y cuyos efectos no podemos imaginar en su totalidad y amplitud

–Realidad física y experiencia psíquica se interrelacionan en la danza: ¿qué papel jugará la virtualidad en este proceso?

•La coreografía y la danza son un ámbito privilegiado para explorar las interacciones entre el arte y los avances científicos-tecnológicos, así como su impacto sobre la condición humana