A framework for monitoring scientific production behavior in Research evaluation systems based on journal ranking lists the brazilian case

A extensão e a qualidade dos resultados de pesquisa tornaram-se fatores-chave para a avaliação do desempenho da universidade. Vários países introduziram sistemas de avaliação de pesquisas que vinculam financiamento a indicadores de desempenho como forma de aumentar a prestação de contas. Em geral, classificações de periódicos são parte integrante desses sistemas. Esta tese aborda o desenvolvimento e a avaliação de um framework para monitorar o comportamento da produção científica em contextos em que as listas de classificação de periódicos estão no centro da avaliação. O principal objetivo do framework é permitir a identificação de padrões desejáveis e adversos na produção acadêmica. Considerando que o Brasil utiliza um sistema de classificação de periódicos (QUALIS) há mais de duas décadas, o framework foi aplicado numa análise de dez anos da produção científica brasileira em oito áreas distintas, tomando o banco de dados da Scopus como referência. Os resultados mostraram um declínio na proporção de artigos indexados na Scopus nas áreas de Ciências Sociais e Humanas (SSH). Um número restrito de periódicos, que permaneceu no sistema durante o período estudado, concentrou um número maior de artigos. No geral, esses periódicos tiveram sua classificação QUALIS inalterada ou melhorada ao longo das avaliações periódicas. Entretanto, na maioria, houve uma diminuição significativa no impacto de citação desses. Além disso, aqueles de menor impacto passaram para as categorias QUALIS mais altas ao longo dos anos, o que ocorreu simultaneamente com um aumento no número de artigos em periódicos de baixo impacto em todos as áreas. Esses resultados mostraram que o uso de listas de classificação de periódicos pode levar professores e alunos a publicarem em periódicos de alta classificação, apesar de terem um baixo impacto de citação. Quando os periódicos de baixo impacto alcançam uma classificação alta, eles também podem concentrar uma grande quantidade de artigos publicados. De certa forma, esses padrões são semelhantes a outros resultados encontrados na literatura, nos quais um aumento significativo de publicações foi seguido por um declínio no impacto. O efeito potencial desses modelos de avaliação é que eles podem incitar as pessoas a selecionar meios de publicação com uma pontuação mais alta de acordo com os critérios estabelecidos, independentemente de sua visibilidade. Além disso, esses efeitos podem intensificar-se quando os resultados da avaliação são vinculados a financiamento.The extent and quality of research output have become key factors for university performance evaluation. Several countries introduced research evaluation systems that link funding to performance indicators as a way to enhance accountability. In general, journal rankings are an integral part of these systems. This thesis approaches the development and evaluation of a framework for monitoring scientific production behavior in settings where journal-ranking lists are at the center of research assessment. The main goal of the framework is to enable the identification of desirable and adverse patterns in academic production. Considering that Brazil has been using a specific journal ranking system (QUALIS) for more than two decades, the framework was applied in the ten-year analysis of Brazilian scientific production in eight distinct subject fields and taking the Scopus database as a reference. Results showed a decline in the proportion of Scopus-indexed articles in the areas of Social Sciences and Humanities (SSH). A few journals that remained in the system during the whole evaluation period concentrated a larger number of published articles. Overall, these journals had their QUALIS classification unchanged or improved in the ranking over the periodic evaluations. However, in general, there was a significant decrease in their citation impact. Moreover, lower-impact journals moved to the highest QUALIS categories over the years, what happened simultaneously with an increase in the number of articles in low-impact journals in all fields. These results have shown that the use of journal ranking lists may lead faculty and students to submit their papers to highly ranked journals, even though may have a low citation impact. When low-impact journals reach a high rank, they may also concentrate a high amount of published articles. In a certain way, these patterns are similar to other results found in literature, in which a significant increase in publication productivity has been followed by an impact decline. The potential effect of these evaluation models is that they may incite people to select publication venues that make them score higher according to the established criteria, regardless of their publications’ visibility. Besides, this effect can be intensified once the evaluation results are linked to funds

Evaluation of Brazilian research output in education : confronting international and national contexts

Scientific production has increased considerably in the last two decades in Brazil, placing the country as an emerging scientific power. In the field of Education, the same can be observed, with a significant growth in the number of articles published by Brazilian researchers in the recent past. In this article we evaluate Brazilian research output in Education from 2007 to 2016, with the intent to understand how national evaluation standards compare with international parameters dictated by bibliometric indicators. We confront the citation impact of Brazilian publications in the period with their classification in an expert-based journal evaluation system called QUALIS. We used Scopus’ SNIP bibliometric indicator for this analysis. The study was carried out using data about 40,825 articles published in 2719 different journals. Results showed that only a small percentage of these articles featured in Scopus indexed journals (13.28%), and most of these journals were published in Brazil (66%). The citation impact of the Scopus indexed publications had a significant growth in the period, but journals with dissimilar citation impact were not distinctively distributed in separate QUALIS categories. These findings show a certain publishing pattern that is likely to be related to the association of the Brazilian research evaluation and funding systems. In addition, they raise questions about how the establishment of evaluation criteria that is mainly subjective and does not include specific metrics may hinder the visibility of research output from a global perspective

Association of serum lipid components and obesity with genetic ancestry in an admixed population of elderly women

The prevalence of metabolic disorders varies among ethnic populations and these disorders represent a critical health care issue for elderly women. This study investigated the correlation between genetic ancestry and body composition, metabolic traits and clinical status in a sample of elderly women. Clinical, nutritional and anthropometric data were collected from 176 volunteers. Genetic ancestry was estimated using 23 ancestry-informative markers. Pearsons correlation test was used to examine the relationship between continuous variables and an independent samples t-test was used to compare the means of continuous traits within categorical variables. Overall ancestry was a combination of European (57.49%), Native American (25.78%) and African (16.73%). Significant correlations were found for European ancestry with body mass index (r = 0.165; p = 0.037) and obesity (mean difference (MD) = 5.3%; p = 0.042). African ancestry showed a significant correlation with LDL (r = 0.159, p = 0.035), VLDL (r = -0.185; p = 0.014), hypertriglyceridemia (MD = 6.4%; p = 0.003) and hyperlipidemia (MD = 4.8%; p = 0.026). Amerindian ancestry showed a significant correlation with triglyceride levels (r = 0.150; p = 0.047) and hypertriglyceridemia (MD = 4.5%; p = 0.039). These findings suggest that genetic admixture may influence the etiology of lipid metabolism-related diseases and obesity in elderly women

Implicaciones del sistema de clasificación de la revista Qualis en las prácticas editoriales en Brasil entre 2007 y 2016

O sistema de classificação de periódicos Qualis tem sido utilizado como indicador da qualidade das pesquisas desenvolvidas no Brasil, configurando uma importante engrenagem dos mecanismos de avaliação da produção científica e distribuição de recursos no país. Nesse viés, esse artigo busca mostrar a forma como o sistema de classificação Qualis, não exaustivo e publicado anualmente, tem induzido a produção científica dos programas de pós-graduação brasileiros, após duas décadas de sua implantação pela CAPES. Para tanto, observou-se a frequência de publicações em periódicos que constavam no sistema Qualis entre 2007 e 2016, para oito diferentes áreas de avaliação. A partir da utilização do indicador SJR fornecido pela Scopus, o impacto internacional dos periódicos mais frequentes naquele período foi verificado, bem como a concentração de artigos entre os mesmos. Os resultados evidenciam que o Qualis direcionou a publicação de artigos para um número restrito de periódicos e que essa produção se concentrou naqueles de mais baixo fator de impacto dentre o restrito conjunto de veículos mais utilizados para publicação. A análise de dados permitiu observar o direcionamento dos esforços, por parte dos pesquisadores, para publicar em periódicos que trazem maior pontuação no sistema, independente do tipo de visibilidade proporcionada pelo veículo do ponto de vista nacional e internacional.The journal classification system known as Qualis has been used as an indicator of the quality of research carried out in Brazil, as it is an important part of the mechanisms of scientific production evaluation and resource distribution in the country. In this context, this article intends to show how the Qualis classification system, a non-exhaustive list published annually, has induced the scientific production of Brazilian graduate programs, after two decades of its implementation by CAPES. To do that, the frequency of publications in journals that were in the Qualis system between 2007 and 2016 has been observed in eight different evaluation areas. Using the SJR index provided by Scopus, the international impact of the most frequent journals in that period was determined, as well as the concentration of articles in these same journals. Results showed that the Qualis system has directed the publication of articles in a restricted number of journals, a scientific production that was concentrated mostly in the journals with lower impact factor among the ones that composed the list. The data analysis showed that researchers have been concentrating efforts to publish in journals that bring higher number of points in the Qualis system, regardless of the visibility of these journals from a national or international point of view.El sistema de clasificación de revistas Qualis se ha utilizado como un indicador de la calidad de la investigación realizada en Brasil, constituyendo un mecanismo importante para los la evaluación de la producción científica y la distribución de recursos en el país. En este sentido, este artículo busca mostrar cómo el sistema no exhaustivo de clasificación Qualis, publicado anualmente, ha inducido la producción científica de los programas de posgrado brasileños, después de dos décadas de su implementación por parte de CAPES. Con este fin, observamos la frecuencia de publicaciones en revistas del sistema Qualis entre 2007 y 2016, para ocho áreas diferentes de evaluación. A partir del uso del indicador SJR de la base Scopus, se verificó el impacto internacional de las revistas más frecuentes en ese período, así como la concentración de artículos entre ellas. Los resultados muestran que Qualis dirigió la publicación de artículos a un número limitado de revistas y que esta producción se concentró en aquellos con el factor de impacto más bajo entre el conjunto de vehículos más utilizados para publicación. El análisis de datos permitió observar la dirección de los esfuerzos de los investigadores para publicar en revistas que aporten la puntuación más alta en el sistema, independientemente del tipo de visibilidad que proporciona el vehículo desde un punto de vista nacional y internacional

Leishmania spp.: isolamento de parasitos pela inoculação de macerados de biopsias de pacientes em camundongos deficientes em interferon gama

Isolation of Leishmania parasite and species identification are important for confirmation and to help define the epidemiology of the leishmaniasis. Mice are often used to isolate pathogens, but the most common mouse strains are resistant to infection with parasites from the Leishmania (Viannia) subgenus. In this study we tested the inoculation of interferon gamma knockout (IFNγ KO) mice with biopsy macerates from Leishmania-infected patients to increase the possibility of isolating parasites. Biopsies from twenty five patients with clinical signs of leishmaniasis were taken and tested for the presence of parasites. Immunohistochemical assay (IHC) and conventional histopathology detected the parasite in 88% and 83% of the patients, respectively. Leishmania sp. were isolated in biopsy macerates from 52% of the patients by culture in Grace's insect medium, but 13% of isolates were lost due to contamination. Inoculation of macerates in IFNγ KO mice provides isolation of parasites in 31.8% of the biopsies. Most isolates belong to L. (Viannia) subgenus, as confirmed by PCR, except one that belongs to L. (Leishmania) subgenus. Our preliminary results support the use of IFNγ KO mice to improve the possibility to isolate New World Leishmania species.O isolamento e a identificação da espécie de parasito do gênero Leishmania são importantes para a confirmação e auxiliam na epidemiologia da leishmaniose. Os camundongos são freqüentemente utilizados para isolar patógenos, porém, as linhagens mais comuns de camundongos são resistentes à infecção por parasitos do subgênero Leishmania (Viannia). Neste estudo, avaliamos a inoculação de macerados de biópsias de pacientes infectados em camundongos deficientes do gene do interferon gama (IFNγ KO) como um método para aumentar a possibilidade de isolar Leishmania spp. Biópsias de 25 pacientes infectados com Leishmania sp. foram avaliadas para a presença de parasitos pelos métodos de imunohistoquímica (IHC) e histopatologia convencional. Os parasitos foram observados, respectivamente, em 88% e 83% das biópsias. Leishmania sp. foi isolada de macerados de biópsia de 52% dos pacientes infectados, quando cultivados em meio Grace, porém, 13% destes isolados foram perdidos devido a contaminações. Inoculação dos macerados em camundongos IFNγ KO proporcionou o isolamento de parasitos oriundos de 31,8% dos pacientes. A maioria dos isolados pertence ao subgênero L. (Viannia), exceto um que pertence ao subgênero L. (Leishmania), como confirmado pela reação da polimerase em cadeia. Nossos resultados preliminares sugerem que o uso de camundongos IFNγ KO pode ser útil para aumentar a possibilidade de isolamento de leishmânias encontradas nas Américas

Implicações do sistema de classificação de periódicos Qualis em práticas de publicação no Brasil entre 2007 e 2016

O sistema de classificação de periódicos Qualis tem sido utilizado como indicador da qualidade das pesquisas desenvolvidas no Brasil, configurando uma importante engrenagem dos mecanismos de avaliação da produção científica e distribuição de recursos no país. Nesse viés, esse artigo busca mostrar a forma como o sistema de classificação Qualis, não exaustivo e publicado anualmente, tem induzido a produção científica dos programas de pós-graduação brasileiros, após duas décadas de sua implantação pela CAPES. Para tanto, observou-se a frequência de publicações em periódicos que constavam no sistema Qualis entre 2007 e 2016, para oito diferentes áreas de avaliação. A partir da utilização do indicador SJR fornecido pela Scopus, o impacto internacional dos periódicos mais frequentes naquele período foi verificado, bem como a concentração de artigos entre os mesmos. Os resultados evidenciam que o Qualis direcionou a publicação de artigos para um número restrito de periódicos e que essa produção se concentrou naqueles de mais baixo fator de impacto dentre o restrito conjunto de veículos mais utilizados para publicação. A análise de dados permitiu observar o direcionamento dos esforços, por parte dos pesquisadores, para publicar em periódicos que trazem maior pontuação no sistema, independente do tipo de visibilidade proporcionada pelo veículo do ponto de vista nacional e internacional.The journal classification system known as Qualis has been used as an indicator of the quality of research carried out in Brazil, as it is an important part of the mechanisms of scientific production evaluation and resource distribution in the country. In this context, this article intends to show how the Qualis classification system, a non-exhaustive list published annually, has induced the scientific production of Brazilian graduate programs, after two decades of its implementation by CAPES. To do that, the frequency of publications in journals that were in the Qualis system between 2007 and 2016 has been observed in eight different evaluation areas. Using the SJR index provided by Scopus, the international impact of the most frequent journals in that period was determined, as well as the concentration of articles in these same journals. Results showed that the Qualis system has directed the publication of articles in a restricted number of journals, a scientific production that was concentrated mostly in the journals with lower impact factor among the ones that composed the list. The data analysis showed that researchers have been concentrating efforts to publish in journals that bring higher number of points in the Qualis system, regardless of the visibility of these journals from a national or international point of view.El sistema de clasificación de revistas Qualis se ha utilizado como un indicador de la calidad de la investigación realizada en Brasil, constituyendo un mecanismo importante para los la evaluación de la producción científica y la distribución de recursos en el país. En este sentido, este artículo busca mostrar cómo el sistema no exhaustivo de clasificación Qualis, publicado anualmente, ha inducido la producción científica de los programas de posgrado brasileños, después de dos décadas de su implementación por parte de CAPES. Con este fin, observamos la frecuencia de publicaciones en revistas del sistema Qualis entre 2007 y 2016, para ocho áreas diferentes de evaluación. A partir del uso del indicador SJR de la base Scopus, se verificó el impacto internacional de las revistas más frecuentes en ese período, así como la concentración de artículos entre ellas. Los resultados muestran que Qualis dirigió la publicación de artículos a un número limitado de revistas y que esta producción se concentró en aquellos con el factor de impacto más bajo entre el conjunto de vehículos más utilizados para publicación. El análisis de datos permitió observar la dirección de los esfuerzos de los investigadores para publicar en revistas que aporten la puntuación más alta en el sistema, independientemente del tipo de visibilidad que proporciona el vehículo desde un punto de vista nacional y internacional

Implicações do sistema de classificação de periódicos Qualis em práticas de publicação no Brasil entre 2007 e 2016

The journal classification system known as Qualis has been used as an indicator of the quality of research carried out in Brazil, as it is an important part of the mechanisms of scientific production evaluation and resource distribution in the country. In this context, this article intends to show how the Qualis classification system, a non-exhaustive list published annually, has induced the scientific production of Brazilian graduate programs, after two decades of its implementation by CAPES. To do that, the frequency of publications in journals that were in the Qualis system between 2007 and 2016 has been observed in eight different evaluation areas. Using the SJR index provided by Scopus, the international impact of the most frequent journals in that period was determined, as well as the concentration of articles in these same journals. Results showed that the Qualis system has directed the publication of articles in a restricted number of journals, a scientific production that was concentrated mostly in the journals with lower impact factor among the ones that composed the list. The data analysis showed that researchers have been concentrating efforts to publish in journals that bring higher number of points in the Qualis system, regardless of the visibility of these journals from a national or international point of view. El sistema de clasificación de revistas Qualis se ha utilizado como un indicador de la calidad de la investigación realizada en Brasil, constituyendo un mecanismo importante para los la evaluación de la producción científica y la distribución de recursos en el país. En este sentido, este artículo busca mostrar cómo el sistema no exhaustivo de clasificación Qualis, publicado anualmente, ha inducido la producción científica de los programas de posgrado brasileños, después de dos décadas de su implementación por parte de CAPES. Con este fin, observamos la frecuencia de publicaciones en revistas del sistema Qualis entre 2007 y 2016, para ocho áreas diferentes de evaluación. A partir del uso del indicador SJR de la base Scopus, se verificó el impacto internacional de las revistas más frecuentes en ese período, así como la concentración de artículos entre ellas. Los resultados muestran que Qualis dirigió la publicación de artículos a un número limitado de revistas y que esta producción se concentró en aquellos con el factor de impacto más bajo entre el conjunto de vehículos más utilizados para publicación. El análisis de datos permitió observar la dirección de los esfuerzos de los investigadores para publicar en revistas que aporten la puntuación más alta en el sistema, independientemente del tipo de visibilidad que proporciona el vehículo desde un punto de vista nacional y internacional. O sistema de classificação de periódicos Qualis tem sido utilizado como indicador da qualidade das pesquisas desenvolvidas no Brasil, configurando uma importante engrenagem dos mecanismos de avaliação da produção científica e distribuição de recursos no país. Nesse viés, esse artigo busca mostrar a forma como o sistema de classificação Qualis, não exaustivo e publicado anualmente, tem induzido a produção científica dos programas de pós-graduação brasileiros, após duas décadas de sua implantação pela CAPES. Para tanto, observou-se a frequência de publicações em periódicos que constavam no sistema Qualis entre 2007 e 2016, para oito diferentes áreas de avaliação. A partir da utilização do indicador SJR fornecido pela Scopus, o impacto internacional dos periódicos mais frequentes naquele período foi verificado, bem como a concentração de artigos entre os mesmos. Os resultados evidenciam que o Qualis direcionou a publicação de artigos para um número restrito de periódicos e que essa produção se concentrou naqueles de mais baixo fator de impacto dentre o restrito conjunto de veículos mais utilizados para publicação. A análise de dados permitiu observar o direcionamento dos esforços, por parte dos pesquisadores, para publicar em periódicos que trazem maior pontuação no sistema, independente do tipo de visibilidade proporcionada pelo veículo do ponto de vista nacional e internacional.

Leishmania spp.: isolamento de parasitos pela inoculação de macerados de biopsias de pacientes em camundongos deficientes em interferon gama

Isolation of Leishmania parasite and species identification are important for confirmation and to help define the epidemiology of the leishmaniasis. Mice are often used to isolate pathogens, but the most common mouse strains are resistant to infection with parasites from the Leishmania (Viannia) subgenus. In this study we tested the inoculation of interferon gamma knockout (IFNγ KO) mice with biopsy macerates from Leishmania-infected patients to increase the possibility of isolating parasites. Biopsies from twenty five patients with clinical signs of leishmaniasis were taken and tested for the presence of parasites. Immunohistochemical assay (IHC) and conventional histopathology detected the parasite in 88% and 83% of the patients, respectively. Leishmania sp. were isolated in biopsy macerates from 52% of the patients by culture in Grace's insect medium, but 13% of isolates were lost due to contamination. Inoculation of macerates in IFNγ KO mice provides isolation of parasites in 31.8% of the biopsies. Most isolates belong to L. (Viannia) subgenus, as confirmed by PCR, except one that belongs to L. (Leishmania) subgenus. Our preliminary results support the use of IFNγ KO mice to improve the possibility to isolate New World Leishmania species.O isolamento e a identificação da espécie de parasito do gênero Leishmania são importantes para a confirmação e auxiliam na epidemiologia da leishmaniose. Os camundongos são freqüentemente utilizados para isolar patógenos, porém, as linhagens mais comuns de camundongos são resistentes à infecção por parasitos do subgênero Leishmania (Viannia). Neste estudo, avaliamos a inoculação de macerados de biópsias de pacientes infectados em camundongos deficientes do gene do interferon gama (IFNγ KO) como um método para aumentar a possibilidade de isolar Leishmania spp. Biópsias de 25 pacientes infectados com Leishmania sp. foram avaliadas para a presença de parasitos pelos métodos de imunohistoquímica (IHC) e histopatologia convencional. Os parasitos foram observados, respectivamente, em 88% e 83% das biópsias. Leishmania sp. foi isolada de macerados de biópsia de 52% dos pacientes infectados, quando cultivados em meio Grace, porém, 13% destes isolados foram perdidos devido a contaminações. Inoculação dos macerados em camundongos IFNγ KO proporcionou o isolamento de parasitos oriundos de 31,8% dos pacientes. A maioria dos isolados pertence ao subgênero L. (Viannia), exceto um que pertence ao subgênero L. (Leishmania), como confirmado pela reação da polimerase em cadeia. Nossos resultados preliminares sugerem que o uso de camundongos IFNγ KO pode ser útil para aumentar a possibilidade de isolamento de leishmânias encontradas nas Américas.Coordenacao de Aperfeicoamento de Pessoal de Nivel Superior (CAPES)UFG - FunapeFAPEGSECTEC/GO - CNP

Identification and biological characterization of Leishmania (Viannia) guyanensis isolated from a patient with tegumentary leishmaniasis in Goiás, a nonendemic area for this species in Brazil

Submitted by Luciana Ferreira ([email protected]) on 2018-07-19T14:28:22Z No. of bitstreams: 2 Artigo - Alause da Silva Pires - 2015.pdf: 4213352 bytes, checksum: 4d2b4babc0632284d89a73947a23d3be (MD5) license_rdf: 0 bytes, checksum: d41d8cd98f00b204e9800998ecf8427e (MD5)Approved for entry into archive by Luciana Ferreira ([email protected]) on 2018-07-20T10:26:37Z (GMT) No. of bitstreams: 2 Artigo - Alause da Silva Pires - 2015.pdf: 4213352 bytes, checksum: 4d2b4babc0632284d89a73947a23d3be (MD5) license_rdf: 0 bytes, checksum: d41d8cd98f00b204e9800998ecf8427e (MD5)Made available in DSpace on 2018-07-20T10:26:37Z (GMT). No. of bitstreams: 2 Artigo - Alause da Silva Pires - 2015.pdf: 4213352 bytes, checksum: 4d2b4babc0632284d89a73947a23d3be (MD5) license_rdf: 0 bytes, checksum: d41d8cd98f00b204e9800998ecf8427e (MD5) Previous issue date: 2015The aim of this study was to characterize clinical field isolates of Leishmania spp. obtained from patients with American Tegumentary Leishmaniasis (ATL) who live in Goiás state, Brazil. The presumed areas of infection were in Goiás, Tocantins, and Pará states. Three isolates of parasites were identified as L. (Viannia) braziliensis and one as L. (V.) guyanensis. The in vitro growth profiles were found to be similar for all parasites. Nevertheless, in C57BL/6 mice, L. (V.) guyanensis infection was better controlled than L. (V.) braziliensis. Yet in C57BL/6 mice deficient in interferon gamma, L. (V.) guyanensis lesions developed faster than those caused by L. (V.) braziliensis isolates. In BALB/c mice, the development of lesions was similar for isolates from both species; however, on the 11th week of infection, amastigotes could not be observed in macrophages from L. (V.) guyanensis-infected mice. Thus, L. (V.) guyanensis can be circulating in Goiás, a state where autochthonous cases of this species had not yet been reported. Considering the difficulties to differentiate L. (V.) guyanensis from L. (V.) braziliensis at the molecular, morphological, and clinical (human and murine models) levels, the presence of L. (V.) guyanensis infections is possibly underestimated in several regions of Brazil