Processamento Audiovisual

Conhecimentos de Base Recomendados

Análise e transformação de dados

Métodos de Ensino

Método de ensino: aulas teóricas, práticas. Trabalhos práticos e fichas parcialmente elaborados nas aulas práticas para consolidar os conhecimentos adquiridos nas aulas teóricas.

Métodos de avaliação:
- Exame:12 valores
- Projeto: 4.5 valores
- Fichas:3.5 valores

O exame tem mínimos de 30%.

Resultados de Aprendizagem

A unidade curricular de Processamento Audiovisual pretende dotar os estudantes de um largo espectro de conhecimentos sobre captura e processamento de sinais audiovisuais como áudio, imagem e vídeo, no contexto de sistemas de larga escala de forma a responder a necessidades actuais e futuras, e a projetar soluções técnicas capazes de fazer face ao crescente volume deste tipo de dados. O programa da disciplina aborda as técnicas fundamentais de captura, representação, descrição e avaliação de qualidade de sinais de áudio, imagem e vídeo, assim como o seu armazenamento e transmissão. São ainda descritas aplicações destas tecnologias, no contexto de sistemas de larga escala, como  sistemas de vigilância para cidades inteligentes e sistemas de viligância e monitorização ambiental à escala regional ou nacional.
Nas aulas práticas os alunos executarão trabalhos de natureza computacional relacionados com os vários tópicos estudados.

Estágio(s)

Não

Programa

Parte I - Processamento de sinais áudio

• Captura de sinais de áudio
• Representação de sinais de áudio, com e sem compressão
• Descritores (features) de sinais de áudio para indexagem e busca em repositórios de larga escala.
• Avaliação de qualidade de áudio

Parte II – Processamento de imagem e vídeo
• Captura de imagem e vídeo
• Representações de imagem e vídeo com e sem compressão, seguindo formatos normalizados (JPEG, MPEG)
• Descritores (features) de imagem e vídeo para aplicação em indexarem e busca em repositórios de larga escala.
• Avaliação de qualidade de imagem e vídeo, métodos e normas

Parte III -  Armazenamento e transmissão de audio e vídeo em larga escala

Parte IV - Aplicações

Métodos de Avaliação

Avaliação
Resolução de problemas: 17.5%
Projecto: 22.5%
Exame: 60.0%

Bibliografia

•Jens-Rainer Ohm, “Multimedia Communication Technology: Representation, Transmission and Identification of Multimedia Signals“, Springer 2004
•Kim, Moreau, Sikora, "MPEG-7 Audio and Beyond: Audio Content Indexing and Retrieval", Wiley 2005
•Salembier, Manjunath, Sikora, "Introduction to MPEG 7: Multimedia Content Description Language", Wiley, 2002
•Salembier, Manjunath, Sikora, "Introduction to MPEG 7: Multimedia Content Description Language", Wiley, 2002
•Murat Tekalp (2015) - Digital Video Processing,  Prentice Hall, 2017
•Stefanos Vrochidis, Benoit Huet, Edward Y. Chang, Ioannis Kompatsiaris, “Big Data Analytics for Large-Scale Multimedia Search”, Wiley 2019