Kontrolle zielgerichteter visueller Suche im menschlichen Gehirn

Die Suche nach einem Zielobjekt in einer komplexen visuellen Szene ist ein alltäglicher Wahrnehmungsvorgang und ein etabliertes experimentelles Paradigma für die Untersuchung selektiver Aufmerksamkeit. Einem klassischen Modell zufolge ist der Suchprozeß seriell: Die Objekte werden nacheinander vom Aufmerksamkeitsfokus selektiert und so für die Identifikation bereitgestellt. Ein Alternativmodell postuliert einen parallelen Suchprozeß, bei dem alle Objekte in der Szene gleichzeitig vom Sehsystem verarbeitet werden. Beide Modelltypen sind gleich gut mit den Resultaten bisheriger Verhaltensexperimente kompatibel. In der vorliegenden Arbeit wurden die neuronalen Grundlagen des Suchprozesses mit Hilfe der funktionellen Magnetresonanztomographie (fMRT) im menschlichen Gehirn untersucht. Es ist bekannt, dass das frontale Augenfeld (FEF) und drei Subregionen (AIPS, PIPS und IPTO) des posterioren parietalen Cortex (PPC) den im seriellen Suchmodell postulierten Teilprozeß der Verschiebung des Aufmerksamkeitsfokus (ohne Augenbewegungen) kontrollieren. In Experiment 1 wurde geprüft, ob diese Regionen auch am Suchprozeß beteiligt sind. Dazu wurde das fMRT-Signal zwischen einer schwierigen Suche nach einer Verknüpfung zweier visueller Merkmale und einer einfachen Suche nach einem einzelnen Merkmal verglichen. Motorische Anforderungen und Reizmuster waren in beiden Bedingungen so ähnlich wie möglich und in Kontrollexperimenten wurde sichergestellt, dass Aktivierungsunterschiede zwischen beiden Bedingungen keine motorischen oder sensorischen Prozesse reflektieren, sondern spezifisch den Prozeß der Verknüpfungssuche. FEF, AIPS, PIPS und IPTO wurden differentiell aktiviert. In Experiment 2 wurde getestet, ob die Beteiligung dieser Areale an der visuellen Suche von der Notwendigkeit einer Merkmalsverknüpfung abhängt. Dazu wurde eine schwierige Merkmalssuche mit der einfachen Merkmalssuche verglichen und kontrolliert, dass auch dieser Vergleich sensorische und motorische Faktoren eliminierte. Differentielle Aktivierungen in diesem Experiment reflektierten nun nicht mehr den Merkmalsverknüpfungsprozeß, sondern allein die höhere Schwierigkeit der Suche. Auch hier fand sich eine differentielle Aktivierung des FEF, AIPS, PIPS und IPTO. Dabei unterschieden sich die Schwierigkeit auf der Verhaltensebene wie auch die differentielle Aktivierung von PIPS auf der neuronalen Ebene nicht zwischen Verknüpfungs- und schwieriger Merkmalssuche. Die Ergebnisse demonstrieren, dass das FEF und drei Subregionen des PPC an der schwierigen visuellen Suche beteiligt sind. Dies ist gut mit der Annahme eines seriellen und nur schwer mit der eines parallelen Suchprozesses vereinbar. Darüber hinaus suggerieren die Befunde, dass der Beitrag des PPC und FEF zur visuellen Suche nicht auf den Prozeß der Merkmalsverknüpfung beschränkt ist, sondern allgemeiner die Anforderung an den Suchprozeß reflektiert.The search for a target object in a complex visual scene is an all-day process of visual perception and an established experimental paradigm for the study of selective attention. A classical model postulates a serial search process. That is, objects are selected sequentially by the focus of attention and are thereby routed to the identification stage. An alternative model postulates a parallel search process, in which all objects within the scene are processed simultaneously. Both models are equally consistent with the current behavioural data. In this thesis, the neural basis of the search process in the human brain was investigated with functional magnetic resonance imaging (fMRI). The frontal eye field (FEF) and three sub-regions (AIPS, PIPS und IPTO) of the posterior parietal cortex (PPC) are known to control the shifting of the focus of attention in space (without eye movements), which is postulated by the serial model to be an essential sub-process of visual search. Experiment 1 tested whether the same areas are also engaged in the search process. The fMRI signal was compared between a difficult search for a feature conjunction and an easy search for a single feature. Motor requirements and stimuli were as similar as possible across conditions and control experiments demonstrated that activation differences between conditions do not reflect sensory or motor factors, but rather the process of conjunction search. The FEF, AIPS, PIPS, and IPTO were differentially activated. Experiment 2 tested whether the involvement of these areas in visual search depends on the necessity for conjoining features. A difficult feature search was compared with the easy feature search. This comparison also eliminated sensory and motor factors according to control experiments. Differential activations in this experiment did not reflect the feature conjunction process, but only the higher search difficulty. Again, a differential activation of the FEF, AIPS, PIPS, and IPTO was found. The conjunction and the difficult feature search did not differ in their difficulty at the behavioral level as well as in PIPS activation strength at the neural level. The results show that the FEF and three PPC sub-regions contribute to difficult visual search. This is consistent with the assumption of a serial, but much less consistent with the assumption of a parallel, search process. Furthermore the results suggest that the contribution of the PPC and FEF to visual search is not restricted to the feature conjunction process, but more generally reflects the demands on the search process

Control of Visual Selection during Visual Search in the Human Brain

How do we find a target object in a cluttered visual scene? Targets carrying unique salient features can be found in parallel without directing attention, whereas targets defined by feature conjunctions or non-salient features need to be scrutinized in a serial attentional process in order to be identified. In this article, we review a series of experiments in which we used fMRI to probe the neural basis of this active search process in the human brain. In all experiments, we compared the fMRI signal between a difficult and an easy visual search (each performed without eye movements) in order to isolate neural activity reflecting the search process from other components such as stimulus responses and movement-related activity. The difficult search was either a conjunction search or a hard feature search and compared with an easy feature search, matched in visual stimulation and motor requirements. During both, the conjunction search and the hard feature search the frontal eye fields (FEF) and three parietal regions located in the intraparietal sulcus (IPS) were differentially activated: the anterior and posterior part of the intraparietal sulcus (AIPS, PIPS) as well as the junction of the intraparietal with the transverse occipital sulcus (IPTO). Only in PIPS, the modulation strength was most indistinguishable between conjunction and hard feature search. In a further experiment we showed that AIPS and IPTO are involved in visual conjunction search even in the absence of distractors; by contrast, the involvement of PIPS seems to depend on the presence of distractors. Taken together, these findings from these experiments demonstrate that all four key nodes of the human ’frontoparietal attention network’ are generally engaged in the covert selection process of visual search. But they also suggest that these areas play differential roles, perhaps reflecting different sub-processes in active search. We conclude by discussing a number of such sub-processes, such as the direction of spatial attention, visual feature binding, and the active suppression of distractors