Software Musical para Expressão Emocional

António Pedro Oliveira

2

Estrutura da apresentação

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Introdução Trabalho de doutoramento Motivação

A música é aceite como uma linguagem de expressão emocional que é utilizada no cinema, televisão, rádio, dança, transportes e centros comerciais

Problema Produção automática de música que exprime

emoções desejadas

3

Introdução EDME RTEDME ConclusionIntrodução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Introdução Objectivo

Implementação e validação de um sistema que produz música que exprime uma emoção desejada, com auxílio de modelos matemáticos que relacionam música e emoções

O sistema trabalha com todos os estilos da música tonal

As emoções são definidas em duas dimensões: valência e activação

4

Introdução EDME RTEDME ConclusionIntrodução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Emoções As emoções têm sido estudadas por

vários cientistas (Damásio e Sutherland 1996; Ekman 1999; Frijda 2000; Lazarus 1999; Ortony e Collins 1988)

Não existe consenso na sua definição (Scherer 2005)

Aceitamos as emoções como correspondendo à nossa manifestação psicofisiológica (Larsen et al., 2008)

5

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Música A música é um estímulo capaz de

influenciar as nossas emoções (Deutsch 1982; Lerdahl e Jackendoff 1996; Narmour 1990; Temperley 2004; Widmer e Goebl 2004)

Existem relações entre as características musicais e as emoções (Gabrielsson e Lindstrom 2001; Juslin 2001)

6

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Relação da música com as emoções

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

7

Abordagens computacionais

Composição e arranjo musical de acordo com guias emocionais (Legaspi et al., 2007; Wassermann et al., 2003)

Selecção de música pré-composta de acordo com modelos de classificação/recomendação (Baum, 2006; Trohidis et al., 2008; Wu and Jeng, 2006; Yang et al., 2008)

8

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Abordagens computacionais

Transformação de música pré-composta com modelos baseados em conhecimento (Livingstone et al., 2007; Wingstedt et al., 2005; Winter, 2005)

Combinação das abordagens mencionadas (Chung, 2006)

9

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Software Musical

10

Fase offline

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

11

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Software Musical

12

Objectivo: produzir música que exprime uma emoção desejada

Fase emtempo real

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Software Musical

13

Base de conhecimento Existe uma base de conhecimento

que é utilizada para controlar o conteúdo emocional da música

Composta por modelos regressivos que estabelecem relações entre emoções e características musicais

Importante na selecção e transformação da música

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Base de conhecimento - Experiências

14

Classificação online da valência e activação de músicas que duram entre 10 e 90 segundos

1ª experiência 16 músicas dos estilos pop e r&b 53 ouvintes

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Base de conhecimento - Experiências

15

2ª experiência 96 músicas do estilo “bandas sonoras” 80 ouvintes

3ª experiência 132 músicas do estilo pop/rock 37 ouvintes

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Base de conhecimento - Experiências

16

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Validação

17

O sistema vai ser validado em duas experiências com recurso a respostas baseadas em ratings e medidas psicofisiológicas

178 músicas MIDI do estilo clássico, pop, rock e bandas sonoras

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Aplicações O software tem aplicação em vários

contextos Composição musical assistida por

computador Produção automática de bandas sonoras Cuidados de saúde Ambientes inteligentes

18

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Instalação interactivaIntrodução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Instalação composta por um computador que usa uma câmara para observar o ambiente

O sistema analisa as imagens para reconhecer a quantidade de presenças e movimento

Instalação interactivaIntrodução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Estas duas variáveis são usadas para definir, respectivamente, os valores de valência e activação do estado emocional do sistema

O estado emocional influencia a expressão da música e das imagens para o ambiente

Instalação interactiva – Experiência

21

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Demonstração

22

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Conclusão O software produz música que exprime

uma emoção desejada O controlo do conteúdo emocional utiliza

uma base de conhecimento obtida com o auxílio de dados empíricos e informação obtida na literatura

A flexibilidade do software possibilita a sua aplicação em áreas como a geração de bandas sonoras e cuidados de saúde

23

Introdução Música e Emoções Software Musical Aplicações Demonstração Conclusão

Fim

24