Deep Reinforcement Learning based Patch Selection for Illuminant Estimation

Previous deep learning based approaches to illuminant estimation either resized the raw image to lower resolution or randomly cropped image patches for the deep learning model. However, such practices would inevitably lead to information loss or the selection of noisy patches that would affect estimation accuracy. In this paper, we regard patch selection in neural network based illuminant estimation as a controlling problem of selecting image patches that could help remove noisy patches and improve estimation accuracy. To achieve this, we construct a selection network (SeNet) to learn a patch selection policy. Based on data statistics and the learning progression state of the deep illuminant estimation network (DeNet), the SeNet decides which training patches should be input to the DeNet, which in turn gives feedback to the SeNet for it to update its selection policy. To achieve such interactive and intelligent learning, we utilize a reinforcement learning approach termed policy gradient to optimize the SeNet. We show that the proposed learning strategy can enhance the illuminant estimation accuracy, speed up the convergence and improve the stability of the training process of DeNet. We evaluate our method on two public datasets and demonstrate our method outperforms state-of-the-art approaches

EFFECTS OF NEUROMODULATION ON NEUROVASCULAR COUPLING

The communication between neurons within neural circuits relies on neurotransmitters (glutamate, γ-aminobutyric acid (GABA)) and neuromodulators (acetylcholine, dopamine, serotonin, etc.). However, despite sharing similar molecular elements, neurotransmitters and neuromodulators are distinct classes of molecules and mediate different aspects of neural activity and metabolism. Neurotransmitters on one hand are responsible for synaptic signal transmission (classical transmission) while neuromodulators exert their functions by mediating different postsynaptic events that result in changes to the balance between excitation and inhibition. Neuromodulation, while essential to nervous system function, has been significantly more difficult to study than neurotransmission. This is principally due to the fact that effects elicited by neuromodulators are usually of slow onset, long lasting, and are not simply excitation or inhibition. In contrast to the effects of neurotransmitters, neuromodulators enable neurons to be more flexible in their ability to encode different sorts of information (e.g. sensory information) on a variety of time scales. However, it is important to appreciate that one of the challenges in the study of neuromodulation is to understand the extent to which neuromodulators’ actions are coordinated at all levels of brain function. That is, from the cellular and metabolic level to network and cognitive control. Therefore, understanding the molecules that mediate brain networks interactions is essential to understanding the brain dynamic, and also helps to put the cellular and molecular processes in perspective. Functional magnetic resonance imaging (fMRI) is a technique that allows access to various cellular and metabolic aspects of network communication that are difficult to access when studying one neuron at the time. Its non-invasiveness nature allows the comparison of data and hypotheses of the primate brain to that of the human brain. Hence, understanding the effects of neuromodulation on local microcircuits is needed. Furthermore, given the massive projections of the neuromodulatory diffuse ascending systems, fMRI combined with pharmacological and neurophysiological methods may provide true insight into their organization and dynamics. However, little is known about how to interpret the effects of neuromodulation in fMRI and neurophysiological data, for instance, how to disentangle blood oxygenation level dependent (BOLD) signal changes relating to cognitive changes (presumably neuromodulatory influences) from stimulus-driven or perceptual effects. The purpose of this dissertation is to understand the causal relationship between neural activity and hemodynamic responses under the influence of neuromodulation. To this end we present the results of six studies. In the first study, we aimed to establish a mass-spectrometry-based technique to uncover the distribution of different metabolites, neurotransmitters and neuromodulators in the macaque brain. We simultaneously measured the concentrations of these biomolecules in brain and in blood. In a second study, we developed a multimodal approach consisting of fMRI (BOLD and cerebral blood flow or CBF), electrophysiological recording with a laminar probe and pharmacology to assess the effects of neuromodulation on neurovascular coupling. We developed a pharmacological injection delivery system using pressure-operated pumps to reliably apply drugs either systemically or intracortically in the NMR scanner. In our third study, we systemically injected lactate and pyruvate to explore whether the plasma concentration of either of these metabolites affects the BOLD responses. This is important given that both metabolites are in a metabolic equilibrium; if this equilibrium is disrupted, changes in the NAD and NADH concentrations would elicit changes in the CBF. In a fourth study, we explored the influence of dopaminergic (DAergic) neuromodulation in the BOLD, CBF and neurophysiological activity. Here we found that DAergic neuromodulation dissociated the BOLD responses from the underlying neural activity. Interestingly, the changes in the neural activity were tightly coupled to the effects seen in the CBF responses. In a subsequent study, we explored whether the effects of dopamine (DA) on the electrophysiological responses are cortical layer dependent and whether specific patterns of neural activity can be used to infer the effects of neuromodulation on the neural activity. This is important, given that different types of neural activity provide independent information about the amplitude and dynamics from BOLD responses, and studies have shown that these bands originate from different cortical layers. What this study revealed, is that local field potentials (LFPs) in the midrange frequencies can indeed provide indications about the sustained effects of neuromodulation on cortical sensory processing. Given the results from the previous study, in our sixth study, we aimed at understanding how different cortical layers may process incoming and outgoing information in the different LFP bands. These findings provide evidence that neuromodulation has profound effects on neurovascular coupling. By changing the excitation-inhibition balance of neural circuits, neuromodulators not only mediate the neural activity, but also adjust the metabolic demands. Therefore, understanding how the different types of neuromodulators affect the BOLD response is essential for an effective interpretation of fMRI-data, not only in tasks involving attentional and reward-related processes, but also for future diagnostic use of fMRI, since many psychiatric disorders are the result of alterations in neuromodulatory systems.Die Kommunikation zwischen den Neuronen innerhalb neuronalen Schaltkreise beruht auf Neurotransmitter (Glutamat, γ-Aminobuttersäure (GABA)) und Neuromodulatoren (Acetylcholin, Dopamin, Serotonin, etc.). Neurotransmitter und Neuromodulatoren sind jedoch unterschiedliche Klassen von Molekülen und verschiedenen Aspekte der neuronalen Aktivität und den Stoffwechsel vermitteln. Neurotransmitters sind einerseits verantwortlich für die synaptische Signalübertragung (klassische Übertragung), während ihre Funktionen ausüben, Neuromodulatoren durch verschiedene postsynaptischen Ereignisse zu vermitteln, die in Änderungen an der Balance zwischen Erregung und Hemmung führen. Neuromodulation , während wesentlich Funktion des Nervensystems hat sich als Neurotransmission wesentlich schwieriger gewesen, zu studieren. Dies ist hauptsächlich auf die Tatsache zurückzuführen, die durch Neuromodulatoren sind in der Regel von langsamen Beginn, langlebig, und sind nicht einfach Anregung oder Hemmung ausgelöst beeinflusst. Im Gegensatz zu den Wirkungen von Neurotransmittern, Neuromodulatoren ermöglichen Neuronen flexibler zu sein in ihrer Fähigkeit, verschiedene Arten von Informationen (beispielsweise sensorische Informationen) auf einer Vielzahl von Zeitskalen zu kodieren. Im Gegensatz zu den Wirkungen von Neurotransmittern, Neuromodulatoren ermöglichen Neuronen flexibler zu sein in ihrer Fähigkeit, verschiedene Arten von Informationen (beispielsweise sensorische Informationen) auf einer Vielzahl von Zeitskalen zu kodieren. Im Gegensatz zu den Wirkungen von Neurotransmittern, Neuromodulatoren ermöglichen Neuronen flexibler zu sein in ihrer Fähigkeit, verschiedene Arten von Informationen (beispielsweise sensorische Informationen) auf einer Vielzahl von Zeitskalen zu kodieren. Jedoch ist es wichtig, dass eine der Herausforderungen bei der Untersuchung von Neuromodulations zu schätzen ist, das Ausmaß, in dem Neuromodulatoren Aktionen koordiniert sind auf allen Ebenen der Gehirnfunktion zu verstehen. Das heißt, von der zellulären und metabolischen Ebene zu vernetzen und kognitive Kontrolle. Daher die Moleküle zu verstehen, die Gehirn Netzwerke Interaktionen vermitteln ist wesentlich für das Verständnis des Gehirns dynamisch, und hilft auch, die zellulären und molekularen Prozesse in Perspektive zu setzen. Funktionellen Kernspintomographie (fMRI) ist eine Technik, die Zugang zu verschiedenen zellulären und metabolischen Aspekte der Netzwerk-Kommunikation ermöglicht, die schwer zugänglich sind, wenn zu der Zeit eines Neurons zu studieren. Seine nicht-Invasivität Natur ermöglicht den Vergleich von Daten und Hypothesen des Primatengehirn zu der des menschlichen Gehirns. Somit wurde das Verständnis der Auswirkungen der Neuromodulation auf lokale Mikro benötigt. Darüber hinaus sind die massiven Projektionen der neuromodulatorischen diffuse Aufstiegsanlagen gegeben, kombiniert fMRI mit pharmakologischen und neurophysiologischen Methoden wahren Einblick in ihre Organisation und Dynamik liefern. Allerdings ist nur wenig darüber bekannt, wie die Auswirkungen der Neuromodulations in fMRI und neurophysiologische Daten zu interpretieren, zum Beispiel, wie Blutoxydation pegelabhängig (BOLD) Signaländerungen in Bezug auf kognitive Veränderungen (vermutlich neuromodulatorischen Einflüsse) von Stimulus-driven oder Wahrnehmungseffekte zu entwirren. Der Zweck dieser Arbeit ist es, die kausale Beziehung zwischen neuronaler Aktivität und hämodynamischen Reaktionen unter dem Einfluss der Neuromodulations zu verstehen. Zu diesem Zweck stellen wir die Ergebnisse von sechs Studien. In der ersten Studie wollten wir eine auf Massenspektrometrie basierende Technik einzurichten, um die Verteilung von verschiedenen Metaboliten, Neurotransmittern und Neuromodulatoren in Makakengehirn aufzudeckenWir maßen gleichzeitig die Konzentrationen dieser Biomoleküle im Gehirn und im Blut. In einer zweiten Studie entwickelten wir einen multimodalen Ansatz, bestehend aus fMRI (BOLD und zerebralen Blutflusses oder CBF), elektrophysiologische Aufzeichnung mit einer laminaren Sonde und Pharmakologie, die Auswirkungen der Neuromodulation auf neurovaskulären Kopplung zu beurteilen. Wir entwickelten eine pharmakologische Injektionsverabreichungssystem druckbetriebenen Pumpen mit zuverlässiger Medikamente gelten entweder systemisch oder intrakortikale im NMR-Scanner. In unserer dritten Studie injizierten wir systemisch Laktat und Pyruvat zu untersuchen, ob die Plasmakonzentration von entweder dieser Metaboliten die BOLD-Antworten beeinflusst. Dies ist wichtig, dass beide gegeben Metaboliten in einem Stoffwechselgleichgewicht sind; wenn dieses Gleichgewicht gestört ist, Veränderungen in den NAD und NADH-Konzentrationen würden Veränderungen in der CBF entlocken. In einer vierten Studie untersuchten wir den Einfluss von dopaminergen (DA-erge) -Neuromodulation im BOLD, CBF und neurophysiologische Aktivität. Hier fanden wir, dass DAerge -Neuromodulation die BOLD-Antworten von der zugrunde liegenden neuronalen Aktivität distanzierte. Interessanterweise waren verbunden, um die Veränderungen in der neuronalen Aktivität eng auf die in den CBF Reaktionen gesehen Wirkungen. In einer nachfolgenden Studie untersuchten wir, ob die Wirkungen von Dopamin (DA) auf die elektrophysiologischen Reaktionen sind Rindenschicht abhängig, und ob bestimmte Muster der neuronalen Aktivität verwendet werden kann, die Wirkungen von Neuromodulations auf die neurale Aktivität zu schließen. Dies ist wichtig, da verschiedene Arten von neuralen Aktivität liefern unabhängige Informationen über die Amplitude und die Dynamik von BOLD-Antworten, und Studien haben gezeigt, dass diese Bands aus verschiedenen kortikalen Schichten stammen. Was diese Studie ergab, dass lokale Feldpotentiale (LFP) in den mittleren Frequenzen in der Tat Hinweise über die nachhaltige Wirkung der Neuromodulation auf die kortikale sensorische Verarbeitung zur Verfügung stellen kann. In Anbetracht der Ergebnisse der früheren Studie, in unserer sechsten Studie wollten wir auf das Verständnis, wie die verschiedenen kortikalen Schichten verarbeiten kann ein- und ausgehenden Informationen in den verschiedenen LFP-Bands. Diese Ergebnisse belegen, dass -Neuromodulation profunde Auswirkungen auf die neurovaskulären Kopplung hat. Durch die Veränderung der Erregungs Hemmung Gleichgewicht neuronaler Schaltkreise vermitteln Neuromodulatoren nicht nur die neurale Aktivität, sondern auch die metabolischen Anforderungen anzupassen. Daher verstehen, wie die verschiedenen Arten von Neuromodulatoren beeinflussen die BOLD-Antwort für eine effektive Interpretation von fMRI-Daten notwendig ist, nicht nur in Aufgaben attentional und Belohnung bezogenen Prozessen mit, sondern auch für zukünftige diagnostische Verwendung von fMRI, da viele psychiatrische Störungen sind das Ergebnis von Veränderungen in neuromodulatorischen Systemen.La comunicación de las neuronas en los circuitos neuronales depende de los neurotransmisores (glutamato, acido γ-amino-butírico o GABA) y los neuromoduladores (acetilcolina, dopamina, serotonina, etc.). Sin embargo, tanto neurotransmisores como neuromoduladores son diferentes clases de moléculas y median diferentes aspectos de la actividad neuronal y del metabolismo, a pesar de compartir elementos moleculares muy similares. Los neurotransmisores, por una lado, son responsables de la transmisión sináptica de la información mientras que los neuromoduladores median diferentes eventos pos-sinápticos que resultan en cambios en el balance de la excitación e inhibición. La influencia de la neuromodulación es esencial para la función del sistema nerviosos, sin embargo es más difícil de estudiar que neurotransmisión. Esto se debe a que los efectos de los neuromoduladores suelen ser de un inicio lento, de larga duración, y no reflejan excitación o inhibición. En contraste a los efectos de los neurotransmisores, los neuromoduladores permiten que las neuronas sean más flexibles en su habilidad de codificar diferentes tipos de información (por ejemplo, información sensorial) en varias escalas temporales. Sin embargo, es importante darse cuenta que uno de objetivos primordiales en el estudio de neuromodulación es el de entender el grado en que la acción de los neuromoduladores está coordinada a todos los niveles de la función cerebral. Es decir, desde los aspectos celulares y metabólicos hasta los niveles de redes neuronales y control cognitivo. Por lo tanto, comprender los forma en la que diferentes moléculas median la interacción entre redes neuronal es esencial para el entendimiento de la dinámica cerebral, y también nos ayudara a comprender los procesos celulares y moleculares asociados a la percepción. La resonancia magnética funcional (fMRI, por sus siglas en inglés) es una técnica que permite acceder a varios aspectos celulares y metabólicos de la comunicación entre redes neuronales que suele ser de difícil acceso. Al mismo tiempo y debido que la fMRI es de naturaleza no invasiva, también permite comparar resultados e hipótesis entre humanos y primates. Por lo tanto, entender los efectos de la neuromodulación en la actividad de los circuitos neuronales es de alta relevancia. Dado que las proyecciones anatómicas de los sistemas de neuromoduladores, el uso de fMRI en combinación con farmacología y neurofisiología puede incrementar nuestro conocimiento sobre la estructura y dinámica de los sistemas de neuromoduladores. Sin embargo, poco se sabe sobre cómo interpretar los efectos de neuromodulation usando fMRI y neurofisiología, por ejemplo, como diferenciar los cambios en la señal BOLD que están relacionados a diferentes estados cognitivos (presumiblemente reflejando la influencia de neuromodulation). El propósito de esta disertación es la de comprender la relación causal que existe entre la actividad neural y la respuesta hemodinámica bajo la influencia de neuromodulación. Para tal fin presentamos los resultados de seis estudios que fueron producto de esta disertacion. En el primer estudio, desarrollamos una técnica basada en espectrometría de masa para detectar y medir la concentración de diferente metabolitos, neurotransmisores y neuromoduladores en el cerebro de primates. Dicha cuantificación se desarrollo simultáneamente tanto in sangre y cerebro. En un segundo estudio, utilizamos varias técnicas de fMRI (BOLD y flujo cerebral sanguíneo, CBF por sus siglas en ingles), registros electrofisiológicos con electrodos laminares y farmacología para acceder a los efectos de neuromodulation en el acople neurovascular. Para este fin, desarrollamos un sistema de inyecciones, basada en cambios de presión, para aplicar substancias sistémicamente o intracorticalmente dentro de un escáner de resonancia magnética. En nuestro tercer estudio, comparamos los efectos de lactato y piruvato para explorar como el desequilibrio metabólico de estas dos substancias afecta la respuesta BOLD. Esto es de gran importancia ya que ambas substancias metabólicas usualmente están en equilibrio. Sin embargo, cuando dicho equilibrio es interrumpido, los procesos metabólicos que acontecen en la mitocondria afectan las concentraciones de NAD y NADH causado cambios en el CBF. En un cuarto estudio, exploramos los efectos de las modulación dopaminergica (DAergic) en las señales BOLD, CBF y en la actividad neuronal. Encontramos que la modulación DAergic disocia las respuesta BOLD de la respuesta neuronal. Interesalmente, los cambios que observamos en la actividad de las neuronas estaba altamente acoplados a los efectos que observamos en la señal de CBF. En un estudio subsecuente, exploramos si los efectos de dopamina en la actividad neuronal es diferentes en las distintas capas de la corteza cerebral. Al mismo tiempo y ya que los neuromoduladores afectan la actividad de circuitos neuronales, exploramos si dichos efectos pueden usados como marcadores de la influencia de la neuromodulación . Esto es importante, ya que diferentes tipos de actividad neuronal brinda información sobre la amplitud y dinámica de la repuesta BOLD, y estudies han demostrado que estas bandas se originan de diferentes capas cortical. Este estudio revelo, que los potenciales de capo (LFPs, por sus siglas en ingles) en frecuencias intermedias puede ser indicativos sobre los efectos de neuromodulation en el procesamiento cortical. Dado los resultados en el estudio previo, en un sexto estudio, nos enfocamos a entender que tan diferentes las capas de la corteza procesan información entrante y saliente en diferentes frecuencias de los LFPs. Estos descubrimientos demuestran que los efectos de los neuromoduladores tiene una fuerte influencia en el acople neurovascular. Los neuromoduladores cambian el balance de excitación e inhibición de los circuitos neuronal, pero también median las demandas metabólicas. De esta manera, entender cómo interpretar los efectos de los neuromoduladores en la respuesta BOLD es esencial para una interpretación veraz y efectiva de los datos generados con fMRI. Estos resultados, no solo nos permiten comprender los procesos que están relacionados a la atención o de varios procesos cognitivos, sino que a su vez, nos permite comprender la señal de fMRI para su futuro uso en la medicina diagnostica, ya que muchas enfermedades psiquiátricas están asociadas a trastornos en el sistemas neuromoduladores

Predicting Building Functions by Fusing Social Media and Remote Sensing Data

Die Funktionen von Gebäuden lassen sich nicht direkt messen, sondern erfordern die Interpretation von Daten. In dieser Arbeit werden drei neue Methoden zur Vorhersage von Gebäudefunktionen vorgestellt, die auf Daten aus sozialen Medien und Fernerkundungsdaten beruhen. Die Methoden basieren auf Ansätzen des maschinellen Lernens und wurden auf kulturell diversifizierten Datensätzen entwickelt und getestet. Die Vorhersage lässt sich durch die Kombination mehrerer Modelle um bis zu 6,9% erhöhen

Three Risky Decades: A Time for Econophysics?

Our Special Issue we publish at a turning point, which we have not dealt with since World War II. The interconnected long-term global shocks such as the coronavirus pandemic, the war in Ukraine, and catastrophic climate change have imposed significant humanitary, socio-economic, political, and environmental restrictions on the globalization process and all aspects of economic and social life including the existence of individual people. The planet is trapped—the current situation seems to be the prelude to an apocalypse whose long-term effects we will have for decades. Therefore, it urgently requires a concept of the planet's survival to be built—only on this basis can the conditions for its development be created. The Special Issue gives evidence of the state of econophysics before the current situation. Therefore, it can provide excellent econophysics or an inter-and cross-disciplinary starting point of a rational approach to a new era

Abstracts on Radio Direction Finding (1899 - 1995)

The files on this record represent the various databases that originally composed the CD-ROM issue of "Abstracts on Radio Direction Finding" database, which is now part of the Dudley Knox Library's Abstracts and Selected Full Text Documents on Radio Direction Finding (1899 - 1995) Collection. (See Calhoun record https://calhoun.nps.edu/handle/10945/57364 for further information on this collection and the bibliography). Due to issues of technological obsolescence preventing current and future audiences from accessing the bibliography, DKL exported and converted into the three files on this record the various databases contained in the CD-ROM. The contents of these files are: 1) RDFA_CompleteBibliography_xls.zip [RDFA_CompleteBibliography.xls: Metadata for the complete bibliography, in Excel 97-2003 Workbook format; RDFA_Glossary.xls: Glossary of terms, in Excel 97-2003 Workbookformat; RDFA_Biographies.xls: Biographies of leading figures, in Excel 97-2003 Workbook format]; 2) RDFA_CompleteBibliography_csv.zip [RDFA_CompleteBibliography.TXT: Metadata for the complete bibliography, in CSV format; RDFA_Glossary.TXT: Glossary of terms, in CSV format; RDFA_Biographies.TXT: Biographies of leading figures, in CSV format]; 3) RDFA_CompleteBibliography.pdf: A human readable display of the bibliographic data, as a means of double-checking any possible deviations due to conversion