Ljudets påverkan på uppfattning av video sekvenser : Ett subjektivt test av uppfattning av audiovisuellt material där audiokvalitén ändrades

The importance of the role audio plays in multimodal information media is often underestimated or even overlooked. This applies to a wide range of media in everyday use- from videoconferencing systems to multi modal human-computer interfaces and to some extent even computer games. When improving audiovisual (AV) systems, the focus is generally on video. A question seldom asked, most likely because it is of a difficult nature, is how we actually perceive audiovisual media. In this study the importance of audio was examined by exposing subjects to audiovisual video clips that varied only in audio quality. In some videos background noise from a subway train was added and was to be regarded as an external signal. The subjects were asked to rate their perception of the audio, video, audiovisual quality as well as the listening effort by rating the comprehensibility of the content. They were also required to pay attention to the content in each video and to answer questions about it. Results show a perceived difference in video quality following the perception of audio quality, although the video quality was never altered. Results also show that a light reverb infused in the audio signal was considered to have a positive impact on comprehensibility while still being perceived as decreasing the audio quality. The thesis has been written in collaboration with telecomunication company Ericsson and all tests and material have been recorded at Ericsson laboratories in Kista, Stockholm.Vikten av audio inom multimodal informationsmedia är ofta underskattad. Detta gäller media som videokonferenssystem, interaktiva datainterface och i någon mån även dataspel. När förbättringar inom audiovisuella system görs, satsas det ofta mer på den visuella delen, t.ex. genom en större videoskärm eller effektivare video codec. En fråga som sällan ställs, säkerligen för att den är svår, är hur vi egentligen uppfattar media. Denna studie ämnar att påvisa vikten av audio genom ett subjektivt test där testpersonerna betygsatte sin kvalitetsuppfattning av audio, video, audiovisuella (AV), hur lätt eller svårt dom fann det att uppfatta innehållet i en serie korta videoklipp, där endast audiokvalitén ändrats. Även bakgrundsljud från tunnelbana fanns med i ljudsignalen för vissa video- klipp och var ämnat att vara betraktat som extern audiosignal (miljö). Testpersonerna ombads betygsätta sin uppfattning av audiokvalité, videokvalité, total audiovisuell kvalité och hur lätt eller svårt det var att uppfatta innehållet i videon. Utöver det blev de ombedda att svara på några frågor angående innehållet i videon. Resultaten visar att den uppfattade videokvalitén följer uppfattningen om audiokvalité även om videokvalitén förblev oförändrad genom hela testet. Videoklipp som innehöll ljud med tillagd efterklang blev betygssatta som sämre i audiokvalité även om uppfattningen blev betygssatt som bättre. Detta examensarbete har utförts i samarbete med telekommunikationsföretaget Ericsson. Själva studien och det tillhörande råmaterialet har blivit inspelat och tagit plats på Ericsson laboratories i Kista, Stockholm