Uso de Técnicas e Ferramentas de Embedding de Conhecimento para Desambiguação de Anotações Segundo Contextos Semânticos

TCC(graduação) - Universidade Federal de Santa Catarina. Centro Tecnológico. Ciências da Computação.Anotações semânticas permitem associar a dados ou porções de dados não-estuturados (e.g., menções relevantes em textos) recursos com semântica bem definida em bases de conhecimento (e.g., DBpedia, Wordnet, Babelnet) que ajudam a explicar a que os dados anotados se referem. Tais anotações permitem melhor explorar os dados anotados em uma miríade de domínios e aplicações, incluindo comércio, marketing, turismo, segurança pública, entre outras. Todavia, ao tentar capturar a semântica de dados, como, por exemplo, postagens em mídias sociais, aplicações de enriquecimento semântico esbarram em problemas como o uso de gírias e regionalismos, e principalmente, a ocorrência de ambiguidade. Várias técnicas ao longo dos anos tentam desambiguar menções a entidades do mundo real em textos para efetuar anotações semânticas corretas. Este trabalho consiste em realizar um estudo do estado da arte do problema da ambiguidade de palavras, tendo como objetivo o domínio das técnicas e ferramentas disponíveis atualmente e que vêm sendo utilizadas na solução deste problema, como por exemplo os embeddings de palavras e conhecimento. A partir disso, pretende-se desambiguar as menções existentes em postagens de mídias sociais com o auxílio dos embeddings em conjunto com redes neurais. Para tal, são identificadas e selecionadas implementações existentes de embeddings. Contextos semânticos são capturados, representados e explorados nesses embeddings para a desambiguação de anotações. A abordagem proposta é avaliada na melhoria da precisão de anotações de conjuntos de tweets, como por exemplo o dataset Microposts, que fornece conjuntos de tweets anuais.Semantic annotations allow to link unstructured data (e.g., relevant references in documents) to resources with well-founded semantics in knowledge information bases (e.g., DBPedia, Wordnet, Babelnet, Google Knowledge Graph) that help to explain what those annotated data are referring to. Such annotations enable better exploitation of the annotated data in a myriad of domains and applications, including marketing, tourism, and public security, among many others. However, by trying to capture the semantics in data, such as social media posts, the computer may face problems, such as the common use of slangs and regionalisms in informal conversation, and mainly the occurrence of ambiguity. Many techniques over the years try to disambiguate mentions to real world entities in documents to produce correct semantic annotations. This work consists in an study of the state of the art of the word ambiguity problem, having as objective the mastery of the techniques and tools available that are being used to solve this problem, such as knowledge and word embedding. From this, it is intended to disambiguate mentions present in social media contents by using embeddings together with neural networks. For such, implementations of embeddings are identified and selected. Semantic contexts are captured, represented and explored in these embeddings for annotation disambiguation. The proposed approach is evaluated in the improvement of the precision of the annotations from a set of tweets, such as the Microposts dataset, which provide annual sets of tweets

Uso de classificadores binários em embeddings de palavras e conhecimento na tarefa de ligação de entidades

TCC(graduação) - Universidade Federal de Santa Catarina. Centro Tecnológico. Sistemas de Informação.Anotar semanticamente dados cuja semântica não é bem definidaou processável por máquinas, tais como grandes quantidades dedados semi ou não-estruturados atualmente disponíveis na Web,tem o potencial de alavancar aplicações que podem tirar proveitode interpretações automáticas de tais dados. Entretanto, os atuaisprocessos automáticos de anotação semântica falham em entregarresultados com boa qualidade. Uma maneira de melhorar a qualidadedos resultados gerados pelos processos de anotação atuais é considerarum contexto mais amplo no qual os dados se encontram. Contextossemânticos construídos a partir de algumas anotações confiáveispodem auxiliar no processo de desambiguação de novas anotações.Eles podem ser representados comoembeddings, que são uma categoriade modelos de processamento natural da linguagem que mapeiammatematicamente as palavras para vetores numéricos. Esse recursofacilita e agiliza a determinação de palavras (vetores) semelhantes ouclusters vetoriais. Este trabalho propõe algoritmos para a criação eutilização de contextos semânticos usando técnicas de aprendizado demáquina em grafos, para melhorar o processo de desambiguação denovas anotações. Os resultados das anotações produzidas pelo modeloproposto são comparadas com aqueles de ferramentas do estado daarte em anotação semântica de dados textuais.Semantically annotating data whose semantics are not well-definedby machines, such as large amounts of semi-structured unstructureddata currently available on the Web, has the potential to leverageapplications that can take advantage of automatic interpretations ofsuch data. However, the current automatic processes of semanticannotation fail to deliver results with good quality. One way toimprove the quality of the results generated by the current annotationprocesses is to consider a broader context in which the data are found.Semantic contexts constructed from reliable annotation can help in thedisambiguation process of new annotations. They can be representedas embedding, which is a category of natural language processingmodels that mathematically map the words to numerical vectors.This feature makes it much easier and streamlines the determinationof similar words (vectors) or vector clusters This work proposesalgorithms for the creation and use of semantic contexts using machinelearning techniques in graphs to improve the disambiguation processof new annotations. The results of the annotations produced by theproposed model are compared with those of state of the art tools insemantic annotation of textual data