The audiovisual perception of actions and events

Het gerapporteerde onderzoek kan onderverdeeld worden in drie deels samenhangende onderzoekslijnen: (1) de audiovisuele perceptie van biologische beweging (2) de audiovisuele perceptie van gebeurtenissen (events) (3) de visuele perceptie van biologische beweging. In de eerste onderzoekslijn werd onderzocht of congruente auditieve informatie de visuele perceptie van acties beïnvloedt. We wilden nagaan of er gedragsmatige evidentie te vinden is voor een audiovisuele representatie van acties, gesuggereerd door neurofysiologisch onderzoek. Concreet werd nagegaan of ritmische auditieve ticks gesynchroniseerd met de voetstappen de visuele perceptie van een puntlicht-wandelaar verbeteren of beïnvloeden. In geen enkel van de experimenten vonden we evidentie dat congruent geluid in vergelijking met incongruent of geen geluid op een dwingende manier de visuele perceptie van een puntlicht-wandelaar verbetert of beïnvloedt. Een wederkerend probleem bij het onderzoeken van de audiovisuele perceptie van biologische beweging is de complexiteit van de stimuli. De aanwezigheid van verschillende types van informatie die moeilijk experimenteel controleerbaar zijn, lokt vaak verschillende strategieën uit waardoor resultaten tussen observeerders erg kunnen verschillen. Om audiovisuele perceptie beter te kunnen onderzoeken met controleerbare stimuli werd de tweede onderzoekslijn gestart. De tweede onderzoekslijn spitste zich voornamelijk toe op het onderzoeken van het punt van subjectieve gelijkheid (PSS) bij ritmische audiovisuele stimuli. Het PSS is de fysische temporele afstand (uitgedrukt in ms) tussen de auditieve en visuele stimuli om ze als gelijktijdig waar te nemen. Hoewel eerder onderzoek suggereerde dat het PSS voor audiovisuele ritmische stimuli (zowel gebaseerd op biologische als artificiële beweging) afhankelijk is van het tempo van het ritme, konden wij deze afhankelijkheid niet eenduidig repliceren. Een belangrijk probleem in dit onderzoeksgebied is de verwarring van factoren die afzonderlijk van invloed kunnen zijn op het PSS. Het doel in gepland onderzoek is om factoren zoals het aantal events, het tempo, visuele anticipatoire informatie, de temporele resolutie en het type van beweging die afzonderlijk van invloed kunnen zijn op het PSS systematisch te onderzoeken. Afhankelijk van de uitkomst van dit onderzoek kan in deze onderzoekslijn opnieuw de brug gemaakt worden met de eerste onderzoekslijn. Er zou kunnen nagegaan worden of het in de literatuur gerapporteerde verschil in PSS voor biologische beweging (in vergelijking met artificiële beweging) inderdaad aan het speciale karakter van biologische beweging te wijten is of eerder verklaard kan worden door (een combinatie van) andere (van de door ons afzonderlijk onderzochte) factoren. In de derde onderzoekslijn onderzochten we (in samenwerking met Prof. Rick Van Der Zwan, Dr. Anna Brooks en Prof. Niko Troje) of de diepte-interpretatie van bistabiele puntlicht-wandelaars kan beïnvloed worden door het gepercipieerde geslacht van de puntlicht-wandelaar. In twee experimenten werd aangetoond dat puntlicht-figuren die als mannelijk worden gepercipieerd voornamelijk worden geïnterpreteerd als naar de observeerder toe georiënteerd, terwijl figuren die als vrouwelijk worden waargenomen vooral van de observeerder weg worden geïnterpreteerd. In drie vervolgexperimenten werd dit sterke correlationele verband echter slechts gedeeltelijk teruggevonden. Bovendien vonden we evidentie die suggereert dat het correlationeel verband tussen gepercipieerd geslacht en gepercipieerde oriëntatie zoals gevonden in de eerste twee experimenten geen causaal verband is en vermoedelijk werd gemedieerd door strategieën en locale beeldinformatie. In deze onderzoekslijn werd ook een techniek ontwikkeld om gradueel de gepercipieerde diepteoriëntatie van puntlicht-figuren te manipuleren. Deze techniek biedt mogelijkheden voor toekomstig onderzoek over de diepteoriëntatie van puntlicht-figuren en werd al succesvol aangewend in de eerste en derde onderzoekslijn.status: publishe