Multimedia - signalbehandling

Emnet gir en innføring i behandling og oppfattelse av tale, audio, musikk, bilder og video for å kunne forstå avanserte teknikker, algoritmer og konsepter for digital prosessering av multimedia signaler Prosesseringen vil belyses ved anvendelser innen multimedia systemer Emnet omhandler audiovisuelle signaler (tale, audio, musikk, bilder og video) og deres statistiske karakteristika, persepsjon av audiovisuell informasjon, samt prinsipper og metoder for digital prosessering av signalene for representasjon, presentasjon og analyse av ulike signaltyper. Det legges spesiell vekt på digital signalkompresjon, multimedia systemer, interaktivitet, estimering og deteksjon ved bruk av maskinlæring og multimedia presentasjoner.

Kunnskapsmål: Kandidaten skal ha

- inngående kunnskap om forskjellige beskrivelser av lyd og bilde i tids- og frekvensdomenene samt sammenhengen mellom dem,

- forstår mekanismer for persepsjon av lyd og bilde,

- grunnleggende kunnskap om kompresjonsalgoritmer for lyd og bilde og deres anvendelse i et digitalt system,

- inngående kunnskap om sentrale standarder for lyd- og bildekompresjon og noen typiske anvendelser av dem og

- Har metodiske og teknologiske innsikt innen multimedia systemer.

- Har metodiske og teknologiske innsikt estimering og deteksjon av multimedia signaler ved bruk av maskinlæring.

Ferdigheter: Kandidaten kan:

- kombinere tidligere ervervet kunnskap og ferdigheter innen matematikk, statistikk og programmering sammen med ny teori til å løse praktiske problemstillinger innen lyd og bildebehandling.

- forstå blokkskjemaer for kompresjonsalgoritmer for lyd og bilde samt forstå grunnleggende signaldekomponering, kvantisering og koding av disse.

- aktivt anvende emnets tema ved innen multimedia systemer, samt utfordres til en kritisk holdning til etablert kunnskap innen området.

- forstår grunnleggede prinsipper av maskinæring og anvendelser av maskinlæring på multimedia signaler

Generell kompetanse: Kandidaten kan:

- vurdere kvaliteten og bruk av lyd og bilde i typiske anvendelser innenfor underholdning og - så langt relevant sette emnets tema inn i en bredere teknologisk, økonomisk/bedriftsmessig og samfunnsmessig kontekst og samarbeide rundt løsning av en praktisk prosjektoppgave.

Forelesninger, regneøvinger og gruppeøvinger.