Integration auditiv-visueller Reizinformation
Final Report Abstract
In dem mehr als vier Jahre dauernden Projekt konnten wir zahlreiche Erkenntnisse zur multisensorischen Integration gewinnen. So konnten wir belegen, dass das Prinzip der additiven Superposition Redundanzgewinne sowohl unter komplexeren Aufgaben als auch unter verschiedenen Aufmerksamkeitsbedingungen beschreiben kann. Für ersteres erweiterten wir das Ausgangsmodell mit einer zweiten Antwortalternative. Das resultierende Modell konnte nicht nur die Reaktionszeiten einer Go/No-go und einer Wahlreaktionsaufgabe erklären, sondern auch die Reaktionsgenauigkeit. Die Stärke des Modells liegt darin, dass der Diffusionsprozess nicht zeithomogen sein muss, sondern Änderungen im Diffusionsprozess erlaubt. Das Modell könnte also überall dort zum Einsatz kommen, wo für die Aufgabe relevante Reize zeitversetzt dargeboten werden, zum Beispiel bei sequentieller Präsentation oder bei zu erwartenden Cueing- oder Maskierungseffekten. Die Vorhersagekraft des Modells wurde mit einem Experiment zum speed-accuracy tradeoff getestet. Hier war es möglich, mit entsprechender Instruktion, das Antwortverhalten so zu beeinflussen, dass die Parameterschätzer der beiden Barrieren des Modells in vorhersagbarer weise variierten: bei Belohnung von schnellen Antworten waren die geschätzten Barrieren näher am Startpunkt als bei Belohnung der Genauigkeit. Es ist außerdem denkbar, dieses Modell an Daten eines Experimentes anzupassen, bei dem mit räumlichen Hinweisreizen den Ort für Zielreize einer Wahlreaktionsaufgabe anzeigen. Im Rahmen des Projektes haben wir dies mit einer Einfachreaktion getestet, wobei das ursprüngliche Modell von Schwarz (1994) zum Einsatz kam. Es zeigte sich, dass der Einfluss räumlicher Hinweisreize durch eine reine Barrierenverschiebung im Modell angepasst werden konnte. Im Gegensatz zu einer willentlichen Kontrolle seitens des Probanden ist in dieser Situation jedoch naheliegend, dass diese Verschiebung eine effizientere Verarbeitung der dargebotenen Reize reflektiert. Bemerkenswert ist, dass dieses Modell unterschiedlich stark ausgeprägte Cueing-Effekte auf die Reizintegration vorhersagen kann, obwohl die Barrierenverschiebung teilweise modalitätsinvariat ist. Vergleichbare Ergebnisse erhielten wir in zwei Experimenten zur räumlichen und selektiven Aufmerksamkeit. Auch hier wurden Aufmerksamkeitseffekte auf Seiten des Modells vor allem durch eine variable Barriere erklärt, was eine analoge Interpretation nahelegt. Was die theoretischen Arbeiten betrifft, so lässt sich feststellen, dass diese bereits gut angenommen wurden und in anderen Arbeiten verwendet wurden (Äquivalenztest, Fiedler, Schröter & Ulrich, 2013; Permutationstest, Chandrasekaran, Lemus, Trubanova, Gondan & Ghanzanfar, 2011). Die erste Arbeit (Blurton, Kesselmeier & Gondan, 2012) zum Wiener Prozess mit zwei absorbieren Barrieren ist bereits als Paket in R verfügbar.
Publications
- (2010). A permutation test for race model inequality. Behavior Research Methods, 42, 23–28
Gondan, M.
- (2010). Redundancy gains in simple responses and go/no-go tasks. Attention, Perception & Psychophysics, 72, 1692–1709
Gondan, M., Götze, T. & Greenlee, M. W.
- (2012). Fast and accurate calculations for cumulative first-passage time distributions in Wiener diffusion models. Journal of Mathematical Psychology, 56, 470–475
Blurton, S. P., Kesselmeier, M. & Gondan, M.
(See online at https://doi.org/10.1016/j.jmp.2012.09.002) - (2012). Generalizations of the race model inequality. Multisensory Research, 26, 95–122
Gondan, M. & Blurton, S. P.
- (2012). Showing that the race model inequality is not violated. Behavior Research Methods, 44, 248–255
Gondan, M., Riehl, V. & Blurton, S. P.
- (2014). Multisensory integration of go/no-go and choice responses. Attention, Perception & Psychophysics, 76, 1212–1233
Blurton, S. P., Greenlee, M. W. & Gondan, M.
(See online at https://doi.org/10.3758/s13414-014-0644-0) - Even faster and even more accurate first-passage time densities and distributions for the Wiener diffusion model. Journal of Mathematical Psychology, Volume 60, June 2014, Pages 20-22
Matthias Gondan, Steven P. Blurton, Miriam Kesselmeier
(See online at https://doi.org/10.1016/j.jmp.2014.05.002) - Cross-modal cueing in audiovisual spatial attention. Attention, Perception, & Psychophysics, October 2015, Volume 77, Issue 7, pp 2356–2376
Blurton, S. P., Greenlee, M. W. & Gondan, M.
(See online at https://doi.org/10.3758/s13414-015-0920-7) - (2011). Effects of spatial and selective attention on basic multisensory integration. Journal of Experimental Psychology: Human Perception and Performance, 37, 1887–1897
Gondan, M., Blurton, S. P., Hughes, F. & Greenlee, M. W.
(See online at https://doi.org/10.1037/a0025635)