Titulo Estágio
Sonificação de Vídeo
Local do Estágio
DEI-FCTUC
Enquadramento
Desde a era do filme mudo até aos dias de hoje que o som é utilizado de modo a criar uma atmosfera que centra a nossa atenção em determinado evento, ação ou estímulo. Som e imagem complementam-se e unificam-se, criando uma nova realidade sensorial ilusória onde o espectador imerge e experiencia algo que na verdade não sente. Ao mesmo tempo, vivemos num mundo onde tudo em nosso redor é som, onde o som funciona como um estímulo cerebral que despoleta sensações e emoções. Assim, conseguimos compreender que, no nosso cérebro, são criadas analogias entre imagem e som. No entanto, como poderemos nós representar estas analogias computacionalmente? Que relações conseguimos criar entre imagem, movimento e som?
Objetivo
Pretende-se conceber um sistema interativo de caráter experimental, capaz de traduzir vídeo em som de modo a que estes se complementem. Numa primeira fase do projeto, pretende-se compreender que analogias se podem formar entre som (intensidade, frequência, timbre, etc.) e vídeo (cor, movimento, transições, sombras, etc.). Para isto, espera-se um estudo do estado da arte em sonificação e geração automática de som. Esta fase envolverá também uma aprendizagem sobre recursos computacionais para
manipulação de som/música aplicáveis e sua exploração. Numa segunda fase, será concebido o sistema e respetivo modelo de interação experimental, com subsequente implementação e avaliação.
Plano de Trabalhos - Semestre 1
1 — Revisão de bibliografia
2 — Investigação sobre o papel do som desde o filme mudo à video art
3 — Investigação sobre técnicas de análise de vídeo
4 — Investigação sobre técnicas de geração automática de som e sonificação
5 — Pesquisa de recursos computacionais adequados, sua experimentação e análise crítica
6 — Preparação da proposta de tese
Plano de Trabalhos - Semestre 2
1 — Conceção do sistema
2 — Desenvolvimento do protótipo do sistema
3 — Experimentação e análise
4 — Escrita da Dissertação
Condições
O estágio será realizado nas instalações Departamento de Engenharia Informática da Universidade de Coimbra.
Orientador
Pedro José Mendes Martins / Fernando Amílcar Bandeira Cardoso
pjmm@dei.uc.pt 📩