Multimodal Integration: fMRI, MRI, EEG, MEG

This chapter provides a comprehensive survey of the motivations, assumptions and pitfalls associated with combining signals such as fMRI with EEG or MEG. Our initial focus in the chapter concerns mathematical approaches for solving the localization problem in EEG and MEG. Next we document the most recent and promising ways in which these signals can be combined with fMRI. Specically, we look at correlative analysis, decomposition techniques, equivalent dipole tting, distributed sources modeling, beamforming, and Bayesian methods. Due to difculties in assessing ground truth of a combined signal in any realistic experiment difculty further confounded by lack of accurate biophysical models of BOLD signal we are cautious to be optimistic about multimodal integration. Nonetheless, as we highlight and explore the technical and methodological difculties of fusing heterogeneous signals, it seems likely that correct fusion of multimodal data will allow previously inaccessible spatiotemporal structures to be visualized and formalized and thus eventually become a useful tool in brain imaging research

Hitting the right target : noninvasive localization of the subthalamic nucleus motor part for specific deep brain stimulation

Deep brain stimulation of the subthalamic nucleus (STN) has gained momentum as a therapy for advanced Parkinson’s disease. The stimulation effectively alleviates the patients’ typical motor symptoms on a long term, but can give rise to cognitive and psychiatric adverse effects as well. Based on primate studies, the STN has been divided into three functionally different parts, which were distinguished by their afferent and efferent connections. The largest part is the motor area, followed by an associative and a limbic area. The serious adverse effects on cognition and behavior occurring after deep brain stimulation are assumed to be caused by electrical current spread to the associative and limbic areas of the STN. Therefore, selective stimulation of the motor part of the STN seems crucial, both to obtain the best possible therapeutic effect on the motor symptoms and to minimize the debilitating effects on cognition and behavior. However, current medical imaging techniques do not yet facilitate the required accurate identification of the STN itself, let alone its different functional areas. The final target for DBS is still often adjusted using intraoperative electrophysiology. Therefore, in this thesis we aimed to improve imaging for deep brain stimulation using noninvasive MRI protocols, in order to identify the STN and its motor part. We studied the advantages and drawbacks of already available noninvasive methods to target the STN. This review did not lead to a straightforward conclusion; identification of the STN motor part remained an open question. In follow-up on this question, we investigated the possibility to distinguish the different functional STN parts based on their connectivity information. Three types of information were carefully analyzed in this thesis. First, we looked into the clustering of local diffusion information within the STN region. We visually inspected the complex diffusion profiles, derived from postmortem rat brain data with high angular resolution, and augmented this manual segmentation method using k-means and graph cuts clustering. Because the weighing of different orders of diffusion information in the traditionally used L2 norm on the orientation distribution functions (ODFs) remained an open issue, we developed a specialized distance measure, the so-called Sobolev norm. This norm does not only take into account the amplitudes of the diffusion profiles, but also their extrema. We showed it to perform better than the L2 norm on synthetic phantom data and real brain (thalamus) data. The research done on this topic facilitates better classification by clustering of gray matter structures in the (deep) brain. Secondly, we were the first to analyze the STN’s full structural connectivity, based on probabilistic fiber tracking in diffusion MRI data of healthy volunteers. The results correspond well to topical literature on STN projections. Furthermore, we assessed the structural connectivity per voxel of the STN seed region and discovered a gradient in connectivity to the premotor cortex within the STN. While going from the medial to the lateral part of the STN, the connectivity increases, confirming the expected lateral location of the STN motor part. Finally, the connectivity analysis produced evidence for the existence of a "hyperdirect" pathway between the motor cortex and the STN in humans, which is very useful for future research into stimulation targets. The results of these experiments indicate that it is possible to find the motor part of the STN as specific target for deep brain stimulation using structural connectivity information acquired in a noninvasive way. Third and last, we studied functional connectivity using resting state functional MRI data of healthy volunteers. The resulting significant clusters provided us with the first complete description of the STN’s resting state functional connectivity, which corresponds with the expectations based on available literature. Moreover, we performed a reverse regression procedure with the average time series signals in motor and limbic areas as principal regressors. The results were analyzed for each STN voxel separately and also showed mediolateral gradients in functional connectivity within the STN. The lateral STN part exhibited more motor connectivity, while the medial part seemed to be more functionally connected to limbic brain areas, as described in neuronal tracer studies. These results show that functional connectivity analysis also is a viable noninvasive method to find the motor part of the STN. The work on noninvasive MRI methods for identification of the STN and its functional parts, as presented in this thesis, thus contributes to future specific stimulation of the motor part of the STN for deep brain stimulation in patients with Parkinson’s disease. This may help to maximize the motor effects and minimize severe cognitive and psychiatric side effects

Geodesic tractography segmentation for directional medical image analysis

Acknowledgements page removed per author's request, 01/06/2014.Geodesic Tractography Segmentation is the two component approach presented in this thesis for the analysis of imagery in oriented domains, with emphasis on the application to diffusion-weighted magnetic resonance imagery (DW-MRI). The computeraided analysis of DW-MRI data presents a new set of problems and opportunities for the application of mathematical and computer vision techniques. The goal is to develop a set of tools that enable clinicians to better understand DW-MRI data and ultimately shed new light on biological processes. This thesis presents a few techniques and tools which may be used to automatically find and segment major neural fiber bundles from DW-MRI data. For each technique, we provide a brief overview of the advantages and limitations of our approach relative to other available approaches.Ph.D.Committee Chair: Tannenbaum, Allen; Committee Member: Barnes, Christopher F.; Committee Member: Niethammer, Marc; Committee Member: Shamma, Jeff; Committee Member: Vela, Patrici

HARDI Methods: tractography reconstructions and automatic parcellation of brain connectivity

Tese de mestrado integrado em Engenharia Biomédica e Biofísica (Radiações em Diagnóstico e Terapia), apresentada à Universidade de Lisboa, através da Faculdade de Ciências, 2012A neuroanatomia humana tem sido objecto de estudo científico desde que surgiu o interesse na organização do corpo humano e nas suas funções, quer como um todo quer através das partes que o constituem. Para atingir este fim, as autópsias foram a primeira forma de revelar algum conhecimento, o qual tem vindo a ser catalogado e sistematizado à medida que a medicina evolui. Passando por novas técnicas de conservação e tratamento de tecido humano, de que são exemplo as dissecções de Klinger, nas quais se fazem secções de material conservado criogenicamente, bem como por estudos histológicos através da utilização de corantes, conseguiu-se uma forma complementar de realizar estes estudos. Permanecia, no entanto, a impossibilidade de analisar in vivo a estrutura e função dos diferentes sistemas que constitutem o Homem. Com o surgimento das técnicas imagiológicas o diagnóstico e monitorização do corpo humano, bem como das patologias a ele associadas, melhoraram consideravelmente. Mais recentemente, com o aparecimento da ressonância magnética (MRI: do Inglês "Magnetic Resonance Imaging"), tornou-se possível estudar as propriedades magnéticas do tecido, reflectindo as suas características intrínsecas com base na aplicação de impulsos de radiofrequência. Através de ressonância magnética é possível estudar essas propriedades em vários núcleos atómicos, sendo mais comum o estudo do hidrogénio, pois somos maioritariamente consistituídos por água e gordura. Uma vez que só é possível medir variações do campo magnético, aplicam-se impulsos de radiofrequência para perturbar o equilíbrio dos spins e medir os seus mecanismos de relaxação, os quais, indirectamente, reflectem a estrutura do tecido. Contudo, o sinal medido é desprovido de qualquer informação espacial. De facto, para podermos proceder a essa quantificação, é necessária a utilização de gradientes de campo magnético, que permitem modificar localmente a frequência de precessão dos protões, através da alteração local do campo magnético, permitindo assim, adquirir o sinal de forma sequencial. A informação obtida constitui uma função variável no espaço e através da transformação de Fourier pode ser quantificada em frequências espaciais, sendo estes dados armazenados no espaço k. O preencimento deste espaço, caracterizado por frequências espaciais, bem como os gradientes de campo magnético que são aplicados, permitem determinar a resolução da imagem que podemos obter, aplicando uma transformação de Fourier inversa. O estudo da ressonância magnética não se restringe à análise da estrutura mas também ao estudo da função e difusão das moléculas de água. A difusão é um processo aleatório, que se traduz pelo movimento térmico das moléculas de água, e o seu estudo permite inferir sobre o estado do tecido e microestrutura associada, de uma forma não invasiva e in vivo. A técnica de imagiologia de ressonância magnética ponderada por difusão (DWI: do Inglês "Diffusion Weighted Imaging") permite o estudo da direccionalidade das moléculas de água e extracção de índices que reflectem directamente a integridade dos tecidos biológicos. De modo a sensibilizar as moléculas de água à difusão, é necessário aplicar sequências de ressonância magnética modificadas, nas quais se aplicam gradientes de campo magnético de difusão para quantificar o deslocamento das moléculas e a sua relação com o coeficiente de difusão das mesmas. Num ambiente livre e sem barreiras a difusão das moléculas de água é isotrópica, uma vez que se apresenta igual em todas as direcções. Todavia, tal não se verifica no corpo humano. A presença destas barreiras leva a que, na verdade, apenas possa ser medido um coeficiente de difusão aparente. Este, por sua vez, traduz a interacção entre as moléculas de água com a microestrutura e, como tal, uma anisotropia na sua difusão. Como caso particular de difusão anisotrópica a nível cerebral, tem-se a difusão das moléculas de água na matéria branca, uma vez que esta apresenta uma direccionalidade preferencial de acordo com a orientação dos axónios, visto estarem presentes menos restrições à sua propagação, ao contrário do que acontece com a direcção perpendicular (devido à membrana celular e às bainhas de mielina). Por oposição, a matéria cinzenta, constituída pelo aglomerado dos corpos celulares dos neurónios, e o líquido cefalorraquidiano apresentam uma difusão sem direcção preferencial (i.e. aproximadamente isotrópica). A informação obtida através da difusão das moléculas de água encontra-se limitada pelo número de direcções segundo o qual aplicamos os gradientes de difusão. Deste modo, surgiu a imagiologia por tensor de difusão (DTI: do Inglês "Diffusion Tensor Imaging"). Esta técnica permite extrair informação acerca da tridimensionalidade da distribuição da difusão de moléculas de água através da aplicação de seis gradientes de difusão não colineares entre si. A distribuição destas moléculas pode, então, ser vista como um elipsóide, no qual o principal vector próprio do tensor representa a contribuição da difusão das moléculas segundo a direcção do axónio (ou paralela), sendo os dois restantes componentes responsáveis pela contribuição transversal. Além da difusividade média (MD: do Inglês "Mean Diffusivity") e das contribuições da difusão paralela (MD//) e perpendicular (MD ) às fibras, é também possível extrair outros índices, como a anisotropia fraccional (FA: do Inglês "Fractional Anisotropy"), que fornece informação acerca da percentagem de difusão anisotrópica num determinado voxel. Para a matéria branca, tal como já foi referido, existe difusão preferencial e, portanto, a anisotropia fraccional será elevada. Por outro lado, para a matéria cinzenta e para o líquido cefalorraquidiano, verificar-se-á uma FA reduzida, devido à ausência de anisotropia. Todavia, regiões com reduzida anisotropia fraccional podem camuflar regiões de conformação de cruzamento de fibras, ou fibras muito anguladas, que a imagiologia por tensor de difusão não consegue resolver. A razão para esta limitação reside no número reduzido de diferentes direcções de difusão que são exploradas, assim como o pressuposto de que a distribuição das moléculas de água é Gaussiana em todo o cérebro, o que não é necessariamente verdade. A fim de se ultrapassar estas limitações, novas técnicas surgiram, nomeadamente as de elevada resolução angular (HARDI: do Inglês "High Angular Resolution Diffusion Imaging"). Estas fazem uso de uma aquisição em função de múltiplas direcções de gradiente e de uma diferente modelação dos dados obtidos, dividindo-se em dois tipos. As técnicas livres de modelos permitem extrair uma função de distribuição da orientação das fibras num determinado voxel directamente do sinal e/ou transformações da função densidade de probabilidade do deslocamento das moléculas de água. Contrariamente, as técnicas baseadas em modelos admitem existir determinados constrangimentos anatómicos e que o sinal proveniente de um determinado voxel é originado por um conjunto de sinais individuais de fibras, caracterizados por uma distribuição preferencial das direcções das fibras. Todos estes métodos têm como objectivo principal recuperar a direcção preferencial da difusão das moléculas de água e reconstruir um trajecto tridimensional que represente a organização das fibras neuronais, pelo que se designam métodos de tractografia. Esta representa a única ferramenta não invasiva de visualização in vivo da matéria branca cerebral e o seu estudo tem revelado uma grande expansão associada ao estabelecimento de marcador biológico para diversas patologias. Adicionalmente, esta técnica tem vindo a tornar-se uma modalidade clínica de rotina e de diversos protocolos de investigação, sendo inclusivamente utilizada para complementar o planeamento em cirurgia, devido à natureza dos dados que gera. Particularmente no caso de dissecções manuais, nas quais os dados de tractografia são manuseados por pessoal especializado, com vista a realizar a parcelização de diferentes tractos de interesse, o processo é moroso e dependente do utilizador, revelando-se necessária a automatização do mesmo. Na realidade, já existem técnicas automáticas que fazem uso de algoritmos de agregação1, nos quais fibras são analisadas e agrupadas segundo características semelhantes, assim como técnicas baseadas em regiões de interesse, em que se extraem apenas os tractos seleccionados entre as regiões escolhidas. O objectivo principal desta dissertação prende-se com a análise automática de dados de tractografia, bem como a parcelização personalizada de tractos de interesse, também esta automática. Em primeiro lugar, foi desenvolvido um algoritmo capaz de lidar automaticamente com funções básicas de carregamento dos ficheiros de tractografia, o seu armazenamento em variáveis fáceis de manusear e a sua filtragem básica de acordo com regiões de interesse de teste. Neste processo de filtragem é feita a avaliação das fibras que atravessam a região de interesse considerada. Assim, após a localização das fibras entre as regiões de interesse os tractos resultantes podem ser guardados de duas formas, as quais têm, necessariamente, que ser especificadas antes de utilizar o software: um ficheiro que contém todas as fibras resultantes da parcelização e outro que contém o mapa de densidade associado, isto é, o número de fibras que se encontra em cada voxel. Após esta fase inicial, a flexibilidade e complexidade do software foi aumentando, uma vez que foram implementados novos filtros e a possibilidade de utilizar regiões de interesse de diferentes espaços anatómicos padrão. Fazendo uma análise a esta última melhoria, pode referir-se que, através de um procedimento de registo não linear da imagem anatómica do espaço padrão ao espaço individual de cada sujeito, foi possível, de forma automática, guardar o campo de deformações que caracteriza a transformação e, assim, gerar regiões de interesse personalizadas ao espaço do sujeito. Estas regiões de interesse serviram depois para a parcelização básica e para seleccionar tractos, mas também para filtragens adicionais, como a exclusão de fibras artefactuosas2 e um filtro especial, no qual apenas os pontos que ligam directamente as diferentes regiões são mantidos. Além do que já foi referido, recorreu-se também à aplicação de planos de interesse que actuam como constrangimentos neuroanatómicos, o que não permite, por exemplo, no caso da radiação óptica, que as fibras se propaguem para o lobo frontal. Esta ferramenta foi utilizada com sucesso para a parcelização automática do Fascículo Arcuado, Corpo Caloso e Radiação Óptica, tendo sido feita a comparação com a dissecção manual, em todos os casos. O estudo do Fasciculo Arcuado demonstrou ser o teste ideal para a ferramenta desenvolvida na medida que permitiu identificar o segmento longo, assim como descrito na literatura. O método automático de duas regiões de interesse deu a origem aos mesmos resultados obtidos manualmente e permitiu confirmar a necessidade de estudos mais aprofundados. Aumentando a complexidade do estudo, realizou-se a parcelização do Corpo Caloso de acordo com conectividade estrutural, isto é, com diferentes regiões envolvidas em funções distintas. Procedeu-se deste modo, e não com base em informação acerca de divisões geométricas, uma vez que estas já demonstraram incongruências quando correlacionadas com subdivisões funcionais. O uso adicional de regiões de interesse para a exclusão de fibras demonstrou-se benéfico na obtenção dos mapas finais. Finalmente, incluiu-se a utilização de um novo filtro para realizar a parcelização da Radiação Óptica, comparando os resultados para DTI e SD(do Inglês "Spherical Deconvolution"). Foi possível determinar limitações na primeira técnica que foram, no entanto, ultrapassadas pela utilização de SD. O atlas final gerado apresenta-se como uma mais-valia para o planeamento cirúrgico num ambiente clínico. O desenvolvimento desta ferramenta resultou em duas apresentações orais em conferências internacionais e encontra-se, de momento, a ser melhorada, a fim de se submeter um artigo de investigação original. Embora se tenha chegado a um resultado final positivo, tendo em conta a meta previamente estabelecida, está aberto o caminho para o seu aperfeiçoamento. Como exemplo disso, poder-se-á recorrer ao uso combinado das duas abordagens de parcelização automática e à utilização de índices específicos dos tractos, o que poderá trazer uma nova força à delineação dos tractos de interesse. Adicionalmente, é também possível melhorar os algoritmos de registo de imagem, tendo em conta a elevada variabilidade anatómica que alguns sujeitos apresentam. Como nota final, gostaria apenas de salientar que a imagiologia por difusão e, em particular, a tractografia, têm ainda muito espaço para progredir. A veracidade desta afirmação traduz-se pela existência de uma grande variedade de modelos e algoritmos implementados, sem que, no entanto, exista consenso na comunidade científica acerca da melhor abordagem a seguir.Diffusion weighted imaging (DWI) has provided us a non-invasive technique to determine physiological information and infer about tissue microstructure. The human body is filled with barriers affecting the mobility of molecules and preventing it from being constant in different directions (anisotropic diffusion). In the brain, the sources for this anisotropy arise from dense packing axons and from the myelin sheath that surrounds them. Only with Diffusion Tensor Imaging (DTI) it was possible to fully characterize anisotropy by offering estimations for average diffusivities in each voxel. However, these methods were limited, not being able to reflect the index of anisotropic diffusion in regions with complex fibre conformations. It was possible to reduce those problems through the acquisition of many gradient directions with High Angular Resolution Diffusion Imaging (HARDI). There are model-free approaches such as Diffusion Spectrum Imaging (DSI) and Q-ball Imaging (QBI) which retrieve an orientation distribution function (ODF) directly from the water molecular displacement. Another method is Spherical Deconvolution, which is a model-based approach based on the computation of a fibre orientation distribution (FOD) from the deconvolution of the diffusion signal and a chosen fibre response function. Reconstructing the fibre orientations from the diffusion profile, generates a three-dimensional reconstruction of neuronal fibres (Tractography) whether in a deterministic, probabilistic or global way. Tractography has two main purposes: non-invasive and in vivo mapping of human white matter and neurosurgical planning. In order to achieve those purposes it is common to apply parcellation techniques which can be subdivided into ROI-based or Clustering base. The aim of this project is to develop an automated method of tract-based parcellation of different brain regions. This tool is essential to retrieve information about the architecture and connectivity of the brain, overcoming time consuming and expertise related issues derived from manual dissections. Firstly we investigated basic functions to handle diffusion and tractography data. In particular, we focused on how to load track files, filter them according to regions of interest and save the output in different formats. Results were always compared with manual dissection. The developed tool increased complexity by introduction a new filtering and the use of regions of interest from different standard spaces, created trough non-linear registrations. Three major tracts of interest were analysed: Arcuate Fasciculus, Corpus Callosum and Optic Radiation