Titulo Estágio
O Som da Imagem
Local do Estágio
CISUC
Enquadramento
A Sonificação de Informação — equivalente auditivo da Visualização de Informação — consiste no uso de técnicas de geração sonora para ajudar à perceção e compreensão de informação. As abordagens mais comuns passam pelo mapeamento de dados de um processo ou de um artefacto em caraterísticas sonoras ou musicais. No caso de um artefacto visual, como por exemplo foto e vídeo, pode-se mapear informação sobre cor, brilho, organização gráfica, etc., num palco sonoro onde timbre, localização espacial, altura, textura e outras caraterísticas facilitem a perceção humana da informação e a sua análise e monitorização. Estes princípios podem ser usados para diversos fins, que vão desde a ajuda à analise de um artefacto até à criação artística. Os sistemas de partículas, por sua vez, são instrumentos de simulação e geração sonoras com larga aplicação em Design de Som, designadamente pela sua capacidade de criação de ambientes complexos pela combinação de elementos simples. Neste estágio pretende-se tirar partido das potencialidades dos sistemas de partículas para explorar métodos de sonificação de artefactos visuais com base em sistemas de partículas.
Objetivo
Pretende-se conceber um sistema capaz de mapear informação extraída de um artefacto visual (p.ex., foto ou vídeo) numa processo sonoro dinâmico com valor informativo e estético. O projeto irá envolver, numa primeira fase, um estudo do estado da arte em sonificação e sistemas de partículas, e investigação sobre técnicas já existentes de extração de informação em artefactos visuais. Esta fase envolverá também uma aprendizagem sobre recursos computacionais para manipulação de som/música aplicáveis e sua exploração experimental. Numa segunda fase, será concebida uma aplicação informática e respetivo modelo de interação, com subsequente implementação e avaliação.
Plano de Trabalhos - Semestre 1
1 - Revisão de Bibliografia e estado da arte em Sonificação, Visualização e Sistemas de Partículas
2 - Investigação sobre técnicas de extração de informação em artefactos visuais
3 - Pesquisa de recursos computacionais adequados, sua experimentação e análise crítica
4 - Esboço de solução informática, incluindo projeto de design sonoro
5 - Preparação da proposta de tese
Plano de Trabalhos - Semestre 2
1 - Conceção de aplicação informática
2 - Desenvolvimento da aplicação
3 - Experimentação e análise
4 - Escrita da Dissertação
5 - Escrita de artigo científico
Condições
Trabalho desenvolvido no Cognitive Media Systems Group do CISUC
Competências:
- Competências de programação
- Dá-se preferência a alunos com conhecimentos de design de som
Observações
A seleção envolverá análise curricular e entrevista.
Equaciona-se o uso de Processing e/ou MAX/DSP e/ou PureData como ferramentas de desenvolvimento da aplicação.
Orientador
Amílcar Cardoso e Pedro Martins
amilcar@dei.uc.pt 📩