Understanding design with VGI using an information relevance framework

Volunteered Geographic Information (VGI) has the potential to offer increased value and usability benefits to end-users over and above that of Professional Geographic Information (PGI). Using a multi-methods approach consisting of participatory observation, focus groups and diary studies, the differences between VGI and PGI are investigated in relation to the characteristics which are the most, or least relevant to an end-user community. The key finding was that the discussion amongst designers should not be whether to choose VGI or PGI as the information data set, but to consider which combination of VGI and PGI relating to different geographic features and task characteristics will best fit the user requirements. VGI is likely to be most relevant to the user when a geographic features is dynamic rather than static in nature These findings have implications for how different forms of information may be most effectively utilised within different usage situations. Above all, a case is presented for the implementation of User Centred Design principals when integrating VGI and PGI together in a single mashup based product to maximise benefit to the end user

Increasing Search Success Rate by Comparing Queries Formation Patterns

Abstract: Retrieving suitable information to a user's information request is a crucial task of search engines. However, most of conventional search engines that are based on pattern matching schemes tend to provide too many improper results, most of which are not corresponding to a user's request. It is due to the uncertainty of queries. To overcome this problem, we distinguished two different patterns after extensive investigation about the process of query formation. One is the general information seeking pattern and the other is the scholastic information retrieving pattern. The general information seeking pattern has a tendency to correspond to crossrelational query formation process pattern, and the scholastic information retrieving pattern corresponds to goal-oriented structured query pattern. This paper proposes a method to improve search results by utilizing these two query formation patterns. The study on the formation of general cross-relational queries, and goal-oriented structured query pattern by which comparing or modeling will improve the efficiency of navigation. These proposals will benefit not only search engine developers and library managers, but also search engine users and researchers. This paper is expected to provide more suitable searching results than those obtained by using current typical information retrieval engines

”Det usøkte funn” - modellering av serendipitet i bibliotek- og informasjonsvitenskap

Denne studien er en teoretisk diskusjon av hvordan fenomenet serendipitet kan forstås innen bibliotek- og informasjonsvitenskap. Fenomenet er tidligere nevnt i ulike diskusjoner og studier innen BIV, men det er behov for en mer generell og grunnleggende forståelse. Gjennom en analyse av serendipitet i forhold til et utvalg modeller for informasjonsatferd gjøres det rede for ulike aspekter ved fenomenet. Videre diskuteres ulike epistemologiske aspekter knyttet til forskning på serendipitet, og det pekes på aktuelle områder og utfordringer innen BIV i forhold til framtidig forskning. Analysen av informasjonsatferdsmodeller avdekker et behov for en mer helhetlig forståelse av serendipitet som fenomen både i forhold til målrettet søking og mer tilfeldig informasjonsakkvisisjon. Videre er det klart at ulike epistemologiske tilnærminger vil være aktuelle i forhold til ulike forskningstema knyttet til serendipitet innen bibliotek- og informasjonsvitenskaplig forskning.Master i bibliotek- og informasjonsvitenska

Exploration of Domain Relevance by Legal Professionals in Information Retrieval Systems

This paper addresses relevance in legal information retrieval (IR). We investigate whether the conceptual framework of relevance in legal IR, as described by Van Opijnen (2017), can be confirmed in practice. The research is conducted with a user questionnaire in which users of a legal IR system had to choose which of two results they would like to see ranked higher for a query and were asked to provide a reasoning for their choice. To avoid questions with an obvious answer and extract as much information as possible about the reasoning process, the search results were chosen to differ on relevance factors from the literature, where one result scores high on one factor, and the other on another factor. The questionnaire had eleven pairs of search results. A total of 43 legal professionals participated: 14 legal information specialists, 6 legal scholars and 23 legal practitioners.The results confirms the existence of domain relevance as described in the theoretical framework by Van Opijnen (2017). Based on the factors mentioned by the respondents, we can conclude that document type, recency, level of depth, legal hierarchy, authority, usability and whether a document is annotated are factors of domain relevance that are largely independent of the task context.We also investigated whether different sub-groups of users of legal IR systems (legal information specialists who are searching for others, legal scholars, and legal practitioners) differ in terms of the factors they consider in judging the relevance of legal documents outside of a task context. Using a PERMANOVA we found no significant difference in the factors reported by these groups. At this moment there is no reason to treat these sub-groups differently in legal IR systems.Multivariate analysis of psychological dat

Relevance and how it was studied

Relevantnost je jedan od pojmova u informacijskoj znanosti općenito, može se čak reći i najvažniji, a u pretraživanju informacija, posebno. Ovaj kritički pregled prati razvoj i daje sintezu istraživanja relevantnosti tijekom proteklih trideset godina s naglaskom na podacima eksperimentalnih istraživanja i istraživanja metodama promatranja. U svrhu logičke povezanosti, povijesne napomene sažimaju zanimanje za relevantnost u informacijskoj znanosti, a potom slijedi rasprava o intuitivnom značenju relevantnosti i o njenom značenju u informacijskoj znanosti. U glavnom dijelu daje se sinteza eksperimenata o ponašanju relevantnosti. Taj dio završava zaključcima koji ustvari daju pojašnjenje i sintezu suvremenih promišljanja o relevantnosti kao i hipoteze za buduća istraživanja. Analize nekih glavnih smjerova koji definiraju relevantnost iznesene su u epilogu.Relevance is a, if not even the, key notion in information science in general and information retrieval in particular. This critical review traces and synthesizes the scholarship on relevance over the past 30 years with the concentration on experimental and observational studies that report data. For context, a historical note summarizes relevance concerns in information science, followed by discussion of the meaning of relevance intuitively and in information science. In the major section, the experiments related to relevance behavior are synthesized. The section concludes with summaries that in effect provide an interpretation and synthesis of contemporary thinking on the topic treated or suggests hypotheses for future research. Analyses of some of the major trends that shape relevance work are offered in the epilogue

Finding Family Facts in the Digital Age: Family History Research and Production Literacies

This study examines the online information behaviors of experienced and novice family history researchers, though the lens of accuracy and an increasingly digital research and production environment. It presents a model of the information behaviors of family history researchers, as well as a literacies framework, which visualizes the skills and knowledge needed to conduct accurate family history research and produce accurate family histories in the digital age.Ph.D., Information Studies -- Drexel University, 201

Situationsbewusste Informationsdienste für das arbeitsbegleitende Lernen

Zunehmend werden Lernen und Arbeiten als miteinander verwobene Aktivitäten verstanden, was von existierenden Ansätzen nur unzureichend unterstützt wird, da sie kaum die Arbeitssituation berücksichtigen, in der sie benutzt werden. In dieser Arbeit geht es darum, eine Methodik für die Lernunterstützung zu erarbeiten und auf technischer Ebene situationsbewusste Informationsdienste mittels Kompetenzontologien und Kontextmanagement zu konzipieren und in realen Unternehmensumgebungen zu evaluieren

Benutzererwartungen: Eine interaktive Information Retrieval Studie zur Wahrnehmung von Suchergebnissen

Ein genaues Verständnis des Suchprozesses und der Frage, wie Benutzer darin unterstützt werden können, bessere Suchergebnisse zu erhalten, stellt eine wichtige Aufgabe der Information-Retrieval-Forschung dar. Jedoch tragen unter anderem die dynamische Natur dieses Prozesses, die aktive Beteiligung des Nutzers am Suchverlauf sowie die Kontextabhängigkeit des Relevanzbegriffs zur Komplexität dieser Fragestellungen bei. Eine besondere Herausforderung besteht daher darin, im Kontext dieses komplexen Prozesses, die genauen Wirkungsmechanismen aller beteiligten Einflussgrößen und ihre Abhängigkeiten zu isolieren. Im Rahmen dieser Arbeit wird daher die Auswirkung zweier wesentlicher Einflussfaktoren, der Systemleistung und der Nutzererwartung, auf Benutzerleistung, Relevanzwahrnehmung und Benutzerzufriedenheit untersucht, während andere Einflussgrößen statistisch kontrolliert werden. Zu diesem Zweck werden drei aufeinander aufbauende interaktive Information-Retrieval-Nutzerstudien geplant und durchgeführt, deren Daten im Anschluss quantitativ ausgewertet werden. Bezüglich der Benutzerzufriedenheit wird dabei insbesondere untersucht, ob sich das aus der Kundenzufriedenheitsforschung bekannte C/D-Paradigma, das die Entstehung von Zufriedenheit als Soll/Ist-Vergleich zwischen wahrgenommener und erwarteter Leistung begreift, auch auf den Kontext der Informationssuche übertragen lässt. Auf Grundlage der vorliegenden Datenbasis kann zunächst gezeigt werden, dass eine direkte Korrelation zwischen der verwendeten Systemqualität und dem Relevanzempfinden der Testteilnehmer zu bestehen scheint. Dabei ist im direkten Vergleich zweier Suchsysteme mit unterschiedlicher Systemgüte die Anwendung restriktiverer Relevanzkriterien im Kontext des besseren Systems zu beobachten. Dieses Verhalten lässt sich insbesondere anhand der in dieser Arbeit eingeführten Imprecisionmaße nachweisen, die im Wesentlichen die Tendenz der Testpersonen erfassen, mit ihrem Relevanzurteil von den dem Testkorpus zugrundeliegenden Jurorenurteilen abzuweichen. Für recallorientierte Benutzerleistungsmaße lässt sich hingegen kein signifikanter Unterschied in Abhängigkeit der Systemleistung beobachten. In Bezug auf die Benutzerzufriedenheit scheint der beschriebene systembedingte Anpassungseffekt der Relevanzwahrnehmung zu einer Reduzierung des perzipierten Systemleistungsunterschieds zu führen, wodurch auch die Benutzerzufriedenheit nur eine schwache Abhängigkeit von der Systemleistung zeigt. Für die im Rahmen der interaktiven Information-Retrieval-Forschung bislang wenig beachteten Nutzererwartungen lässt sich hingegen ein qualitativ anderes Verhalten feststellen. Hier führt eine positive Grundeinstellung bezüglich des verwendeten Suchsystems zur Anwendung weniger restriktiver Relevanzkriterien, was sich schlussendlich in einer signifikant erhöhten Nutzerzufriedenheit im Vergleich zu Testpersonen mit einer niedrigen Erwartungshaltung widerspiegelt. Darüber hinaus ergeben sich für ausgewählte Leistungsmaße und Zufriedenheitsdimensionen auch Wechselwirkungen zwischen beiden Anpassungseffekten, welche darauf hindeuten, dass der systembedingte Anpassungseffekt der Relevanzwahrnehmung vornehmlich im Kontext einer hohen Erwartungshaltung zum Tragen kommt, weswegen im Umkehrschluss ein Einfluss der Systemgüte auf die Benutzerzufriedenheit hauptsächlich bei Probanden mit niedriger Erwartungshaltung zu beobachten ist. In diesem Sinne können also die Vorhersagen des C/D-Paradigmas, bei denen eine hohe Zufriedenheit mit dem Übertreffen der eigenen Erwartungen assoziiert ist, nicht bestätigt werden. Vielmehr scheint die aktive Beteiligung der Nutzer am Suchprozess zur Ausbildung anderer Wirkungsmechanismen zu führen, bei denen die Entstehung von Nutzerzufriedenheit stärker an eine positive Einstellung zum verwendeten Suchsystem gekoppelt ist

Searching for Relevance in the Relevance of Search

Abstract. Discussion of relevance has permeated the information science literature for the past 50+ years, and yet we are no closer to resolution of the matter. In this research we developed a set of measures to operationalize the dimensions underpinning Saracevic's manifestations of relevance. We used an existing data set collected from 48 participants who used a web search engine to complete four search tasks that represent four subject domains. From this study which had assessed multiple aspects of the search process -from cognitive to behavioural -we derived a set of measures for cognitive, motivational, situational, topical and system relevances. Using regression analysis, we demonstrate how the measures partially predict search success, and additionally use factor analysis to identify the underlying constructs of relevance. The results show that Saracevic's five manifestations may be merged into three types that represent the user, system and the task