FenixEdu™

Dissertação

{en_GB=From Music to Image, a Computational Creativity Approach} {} EVALUATED

Detalhes: {pt=A Criatividade é um factor essencial na criação de algo novo, ou na resolução de problemas. Está directamente ligada à inspiração, que pode surgir de dentro de nós, ou do ambiente envolvente. A Criatividade Computacional é um campo de investigação que se concentra na replicação, simulação e modelação da criatividade utilizando máquinas. Algumas abordagens têm sido desenvolvidas para modelar e implementar sistemas inspiracionais que se baseiam em associações inter-domínio. Propomos uma possível abordagem para uma associação entre os domínios musical e visual. Apresentamos um sistema inspiracional que gera imagens abstractas tendo a inspiração em ficheiros de música como base para o processo criativo. Desta forma, o sistema extrai características de um ficheiro MIDI dado como input, associando-as a características visuais, gerando três tipos de outputs. Primeiro, a Imagem Aleatória e a Imagem Associada - que são um resultado directo da aplicação da nossa abordagem considerando diferentes distribuições de formas - e segundo, a Imagem Genética, que é o resultado da execução de um Algoritmo Genético que tem em consideração teoria musical e harmonia de cores na procura de melhores resultados. No final, os resultados de uma avaliação feita através de inquéritos online demonstram que o sistema é capaz de gerar imagens abstractas que têm uma relação com a música que serviu de base para o processo de criação. Acreditamos que o sistema proposto oferece uma solução interessante para possíveis associações entre estes dois domínios. Contudo, existe ainda trabalho que pode ser desenvolvido para melhorar a qualidade das imagens geradas., en=Creativity is essential when creating something new or solving problems. It is linked with inspiration, that may come from within us, or from the surrounding environment. Computational creativity is a research field that focuses on the replication, simulation and modeling of creativity using machines. Some attempts have been made to model and implement inspirational systems that rely on cross-domain associations. In this Thesis, we propose a possible approach for a cross-domain association between the musical and visual domains. We present a system that generates abstract images having as inspiration music files as the basis for the creative process. The system extracts features from a MIDI music file given as input, associating them to visual characteristics, thus generating three different outputs. First, the Random and Associated Images - that result from the application of our approach considering different shape’s distribution - and second, the Genetic Image, that is the result of the application of one Genetic Algorithm that considers music and color theory while searching for better results. The results of our evaluation conducted through online surveys demonstrate that our system is capable of generating abstract images from music, since a majority of users consider the images to be abstract, and that they have a relation with the music that served as the basis for the association process. We believe that the proposed system provides an interesting solution for possible associations between these two domains. However, work on the topic can still be done to improve the quality of generated images.}
Keywords: {pt=Criatividade Computacional, Análise Musical, Geração de Imagem, Associações Inter-Domínio, Algoritmo Genético, en=Computational Creativity, Music Analysis, Image Generation, Cross-Domain Associations, Genetic Algorithm}

Discussão: novembro 17, 2020, 16:30