Indicadores bibliométricos de impacto: estudo comparativo entre os índices h e g aplicados aos pesquisadores mais produtivos na temática Estudos Métricos

Analisar o desempenho científico de um investigador, temática, disciplina, área do conhecimento ou país é uma atividade essencial para subsidiar e orientar políticas científicas institucionais ou governamentais. Para tanto, se faz necessário ter critérios de avaliação consistentes e fidedignos ao desempenho do elemento avaliado. Entre os indicadores de impacto presentes na literatura científica, destaca-se o índice h, um parâmetro avaliativo considerado robusto, por avaliar de forma simultânea, os aspectos relativos à produção e ao impacto. No entanto, devido às deficiências apresentadas, diversas variações desse indicador têm sido desenvolvidas no intuito de minimizar as questões levantadas. Nesse sentido, observa-se o índice g, uma variação de h, que vem ganhando visibilidade na avaliação da produtividade científica. Um conjunto de artigos tem índice g se g é o posto mais alto, de modo que os artigos principais têm juntos, pelo menos g2 citações. O objetivo desta pesquisa é realizar uma análise comparativa entre o índice h e o índice g, a fim de verificar seus desempenhos, propriedades e relações, como indicadores de impacto na comunidade científica. Como procedimento de pesquisa, tomou-se como universo, os 20 autores mais produtivos na revista Scientometrics, no período de 35 anos (1980-2014). Levantou-se, na base Scopus, para cada pesquisador, o total de artigos publicados, o número de citações por artigo e o ano de publicação. A partir dos dados levantados, calcularam-se os índices h, g e a razão g/h para cada investigador. Observou-se a tendência de o índice g ser 1,76 vezes maior que o valor de h. Conclui-se que ambos os indicadores cientométricos, h e g, são complementares e auxiliam na identificação de autores com alta produtividade em uma temática e a razão g/h é indicada para comparar pesquisadores com diferentes tempo de publicação. Percebe-se, assim, a relevância dos procedimentos na mensuração do impacto científico

Indicadores de acoplamento bibliográfico para a avaliação da proximidade teórico-metodológica em redes de genealogia acadêmica

Este estudo analisa a contribuição do Método de Acoplamento Bibliográfico para a avaliação da intensidade da transmissão da corrente teórico-metodológica de um pesquisador entre seus descendentes acadêmicos. Como universo de análise, utiliza o conjunto de doutores bolsistas PQ orientados por Aldo Barreto, pesquisador PQ Sênior da área de Ciência da Informação. Como procedimento metodológico, recuperou-se o conjunto de artigos publicados por Aldo Barreto e seus  descendentes bolsistas PQ. A seguir, identificaram-se se os autores citados nesse corpus de pesquisa e calcularam-se os índices normalizados de Acoplamento Bibliográfico de Autores entre Aldo Barreto e os pesquisadores descendentes analisados. As proximidades teóricas mais intensas ocorreram entre Aldo Barreto e suas orientandas Maria N. González de Gomez e Regina M. Marteleto e seu orientando Carlos H. M. Almeida. Observou-se a constância da influência de Pierre Bourdieu e Michel Foucault na rede de genealogia acadêmica analisada. Conclui-se que o Acoplamento Bibliográfico de Autores contribuiu para a análise da intensidade da transmissão da identidade científica na linhagem genealógica do grupo de pesquisadores estudados

Índice h de Hirsch: análise comparativa entre as bases de dados Scopus, Web of Science e Google Acadêmico

Among the indicators to evaluate the scientific impact of publications, there is the Hirsch’s h-index that, simultaneously, measures aspects related to the production and the impact of the scientific production of a researcher, periodical, group, research center or country on a database. In this context, this research aims to get the indices h to 20 researchers considered representative in the theme “Metric Studies of Information”, on three distinct data sources (Scopus, Web of Science and Google Scholar), in order to identify and to analyze possible differences between the values of these indicators, examining the consistency of the indices in these information sources. To this end, the h-index for each investigator in the mentioned platforms was surveyed. By means of the WilcoxonMann-Whitney test, using a 5% significance level, it was identified that the hindices did not differ statistically between the Scopus and Web of Science databases. On the other hand, this index differed significantly in relation to the values obtained from Google Scholar.Entre os indicadores destinados a avaliar o impacto científico das publicações, destaca-se o índice h de Hirsch, que mede, de forma simultânea, aspectos relacionados à produção e ao impacto da produção científica de um pesquisador, periódico, grupo e centro de pesquisa ou país em uma base de dados. Nesse contexto, esta pesquisa tem por objetivo obter os índices h para 20 pesquisadores representativos na temática “Estudos Métricos da Informação” em três fontes de dados distintas — Scopus, Web of Science e Google Acadêmico e identificar e analisar possíveis diferenças entre os valores desses indicadores, a fim de examinar a congruência dos índices nessas fontes de informação. Para isso, levantaram-se, nas plataformas mencionadas, os índices h para cada investigador. Identifica-se, por meio do Teste de Wilcoxon-Mann-Whitney com nível de significância de 5%, que o índice h não difere estatisticamente entre as bases de dados Scopus e Web of Science. Por outro lado, esse índice diferiu significativamente dos valores obtidos a partir do Google Acadêmico

Factor de impacto de revistas de la América Latina en Ciencia Social: un estudio comparativo entre las bases Scopus y Web of Science

El factor de impacto (FI) es un indicador bibliométrico utilizado en la evaluación del impacto y visibilidad de las investigaciones diseminadas por las revistas científicas. Sin embargo, varios estudiosos han señalado críticas y limitaciones en cuanto a su utilización. Este trabajo objetiva comparar el FI de las revistas de América Latina, en el área de Ciencia Sociales, presentes simultáneamente en las bases de datos Scopus y Web of Science. Los resultados apuntaron que el 71% de las revistas presentaron los FIs calculados a partir de Scopus por encima de los obtenidos de la Web of Science. Se verificó la existencia de correlación lineal de Pearson de 0,43 de tendencia positiva y se aplicó la prueba Wilcoxon demostrando diferencias estadísticamente significativas entre los FIs (se utilizó el nivel de significancia del 5%). El estudio evidenció las dificultades de comparación del FI y de visibilidad internacional en la ciencia principal

Contribuição da análise multivariada para os indicadores de avaliação dos programas de pós graduação: uma análise na área de Matemática (2007-2009)

The aim of this study is to analyze the relationship between the quantitative indicators used by CAPES and the final grade of each graduate program through the application of multivariate statistical procedures, in order to contribute to a better understanding of the Brazilian graduate program evaluation system. We evaluated all 26 graduate programs in the area of Mathematics during the 2007-2009 triennium through multivariate methods according to the following indicators: total number of theses and dissertations defended and average of published articles per permanent professor, according to Qualis stratification. It was observed that, in all cluster analyses, graduate programs with grade 3 were always gathered in one single group, while the ones with other grades were gradually separated with the insertion of more analysis of indicators. In addition, the more indicators were included in the analysis, the more refined and close to the grades attributed by CAPES were the results.O objetivo desta pesquisa é analisar a relação entre os indicadores quantitativos, utilizados na CAPES, e o conceito final de cada programa de pósgraduação, por meio da aplicação de procedimentos estatísticos multivariados, a fim de contribuir para a compreensão do sistema de avaliação da pós-graduação brasileira. Para o conjunto dos 26 programas de pós-graduação da área de Matemática, no triênio 2007-2009, foram avaliados, por meio de métodos multivariados, os seguintes indicadores: total de teses e dissertações defendidas e média de artigos por docente permanente, segundo a estratificação Qualis. Observou-se, em todas as Análises de clusters realizadas, que os programas com conceito CAPES 3 aglutinaram-se sempre em um único grupo, ao passo que os demais foram se separando à medida em que foram inseridos mais indicadores na análise. Ainda, quanto mais indicadores foram incluídos na análise, mais refinado e próximo do conceito atribuído pela CAPES foi o resultado

The Concepts of Domain, Discourse Community and Epistemic Community: affinities and specificities

The characteristics or properties that underlie the concept of community are present in several social groups which have some similarity in their distinctive features and they act as a core to the construction of the concepts of Domain, Discourse Community and Epistemic Community, which are fundamental to the research in several fields of knowledge. Considering the conceptual triangle – Domain, Discourse Community, and Epistemic Community - this study aims to examine theoretical and methodological aspects related to them by investigating their characterizing features and, consequently, their main distinctions and similarities, especially regarding the universe of Information Science. Thus, the aim of this essay is to contribute to the deepening of the theoretical understanding of the concepts covered, reflecting on their compatibilities, as well as the characteristics that distinguish and specify them.           It was possible to see that these concepts have similarities to each other, such as their contexts arising from the need to understand sociological aspects of science; the mutual understanding among its members about the specialized languages and theoretical bases used; the analysis based on tacit documents, duly expressed and recorded. These aspects of similarities demonstrate that these concepts can be understood as belonging to the same set, and inserted in the overarching area of Sociology of Science. Even so, these concepts have their characterizing features, which distinguish their analysis objectives and also their peculiar scientific biases.The characteristics or properties that underlie the concept of community are present in several social groups which have some similarity in their distinctive features and they act as a core to the construction of the concepts of Domain, Discourse Community and Epistemic Community, which are fundamental to the research in several fields of knowledge. Considering the conceptual triangle – Domain, Discourse Community, and Epistemic Community - this study aims to examine theoretical and methodological aspects related to them by investigating their characterizing features and, consequently, their main distinctions and similarities, especially regarding the universe of Information Science. Thus, the aim of this essay is to contribute to the deepening of the theoretical understanding of the concepts covered, reflecting on their compatibilities, as well as the characteristics that distinguish and specify them. For this, the methodological choice was centered into retrieving and analyzing the seminal authors of the three considered dimensions – domain, discourse community, and epistemic community – according to their recurrent citing presence in the scientific literature.  It was therefore possible to see that these concepts have similarities to each other, such as their contexts arising from the need to understand sociological aspects of science; the mutual understanding among its members about the specialized languages and theoretical bases used; the analysis based on tacit documents, duly expressed and recorded. These aspects of similarities demonstrate that these concepts can be understood as belonging to the same set, and inserted in the overarching area of Sociology of Science. Even so, these concepts have their features, which distinguish their analysis objectives and also their peculiar scientific biases

Contribuição da estatística multivariada para a avaliação dos programas de pós-graduação no Brasil: um estudo na área da Ciência da Informação

This research aims to analyze the contribution of multivariate statistics as a method to support the understanding of the complex methodology of graduate assessment conducted by Coordination for the Improvement of Higher Education Personnel. More specifically, this research seeks to identify the cluster of graduate programs in Information Science generated by cluster analysis and the data generated by boxplot graphics, based on the set of indicators content in the Comparative Spreadsheets of Triennial Assessment of the area, and then comparing groups of graduate programs, according to the concept obtained by the Coordination for the Improvement of Higher Education Personnel assessment, with the result of the cluster obtained by cluster analysis, in order to verify the participation and adequacy of indicators in the allocation of concepts of graduate programs. For all 14 graduate programs of Information Science area, evaluated in the last triennial years (2010-2012), the following indicators were analyzed: total of theses and dissertations, total of papers published, according to Qualis stratification, total of papers published in conference proceedings, books and chapters, full text, collections, and other entries and artistic production published, weighted by faculty member. According to the results, it was observed that while the formed clusters present similar concepts, only the indicators present in the Comparative Spreadsheets of Triennial Assessment were not sufficient to discern them, the inclusion of quality indicators being necessary, since the production indicators are not sufficient to distinguish the programs according to their concepts.Esta pesquisa tem como objetivo geral analisar a contribuição de técnicas estatísticas uni-multivariadas como um método de suporte ao entendimento da complexa metodologia de avaliação de programas de pósgraduação realizada pela Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. De forma mais específica, esta pesquisa busca identificar os agrupamentos dos programas de pós-graduação em Ciência da Informação, gerados pela análise de cluster e os dados gerados pelos gráficos boxplot, com base no conjunto de indicadores presentes na Planilha Comparativa da Avaliação Trienal da área. Posteriormente, comparou-se os grupos de programas de pósgraduação, segundo a nota obtida pela avaliação com o resultado do agrupamento obtido pela análise de cluster, a fim de visualizar a participação e suficiência dos indicadores na atribuição dos conceitos dos programas de pós-graduação. Para os 14 programas de pós-graduação da área de Ciência da Informação, no triênio 2013, analisaram-se os seguintes indicadores: total de teses e dissertações defendidas, média de artigos publicados segundo a estratificação Qualis, média de trabalhos completos publicados em anais de eventos técnico-científicos, livros, capítulos de livro, texto integral, coletâneas, verbetes e outros e produção artística, ponderados por docente permanente. De acordo com os resultados obtidos, observou-se que, embora os agrupamentos formados apresentem conceitos próximos, apenas os indicadores presentes na Planilha não são suficientes para discerni-los, sendo necessária a inclusão de indicadores qualitativos, uma vez que os indicadores de produção não são suficientes para distinguir os programas de acordo com seus conceitos

A contribuição das referências dos planos de ensino para a caracterização de domínios: um estudo no curso de Biocombustível do Centro Paula Souza

This research analyzes the bibliographical references indicated in the courses taught in two units of the Technological Course in Biofuels at the Centro Paula Souza in order to characterize the scientific domain founding the training of their students. In addition, this study maps the citation network by block of courses – basic and professional-, identifying the theoretical-methodological proximity between the two units. The corpus of analysis consists of 284 references retrieved at the Fatec Jaboticabal unit, and 238 references at the Fatec Araçatuba unit. Bibliometric relational citation analysis procedures associated with Social Network Analysis were adopted. As a result, there was a moderate overlap of citation identities between the two units for the group of subjects of the basic axis and the group of subjects of Agricultural Production Process, Management, Final Undergraduate Project and Transversal subjects. On the other hand, the overlap was less significant for the Biofuel Production Processes axis. The study concluded that the adopted methodology allowed to characterize the scientific domain founding of the technologist's training in Biofuels, in its two units, as well as to identify their similarities and specificities regarding their citation identities, constituted from the references adopted in the courses.Esta investigación analiza las referencias bibliográficas señaladas en los cursos en dos unidades del Curso Tecnológico en Biocombustibles del Centro Paula Souza con el fin de caracterizar el dominio científico que fundamenta la formación de sus estudiantes. Además, este estudio mapea la red de citas por bloque de cursos - básico y profesional-, identificando la proximidad teórico-metodológica entre las dos unidades. El corpus de análisis consta de 284 referencias recuperadas en la unidad Fatec Jaboticabal y 238 referencias en la unidad Fatec Araçatuba. Se adoptan procedimientos bibliométricos de análisis de citas relacionales asociados con el análisis de redes sociales. Como resultado, hubo una moderada superposición de identidades de citación entre las dos unidades didácticas para el grupo de cursos del eje básico y el grupo de cursos de Procesos Productivos Agropecuarios, Gestión, Trabajo Fin de Grado y cursos Transversales. Por otro lado, la superposición fue menos significativa para el eje Procesos de producción de biocombustibles. El estudio concluyó que la metodología adoptada permitió caracterizar el dominio científico fundacional de la formación del tecnólogo en Biocombustibles, en sus dos unidades didácticas, así como identificar sus similitudes y especificidades en cuanto a sus identidades de citación, constituidas a partir de las referencias adoptadas en los cursos.Esta pesquisa analisa as referências adotadas nas disciplinas ministradas em duas unidades do Curso Tecnológico em Biocombustíveis do Centro Paula Souza a fim de caracterizar o domínio científico fundante da formação dos seus egressos. Ainda, mapeia a rede de citações por bloco de disciplinas – básicas e profissionais-, identificando a proximidade teórico-metodológica entre as duas unidades. O corpus de análise é constituído por 284 referências recuperadas para a unidade Fatec Jaboticabal e 238 referências para a unidade Fatec Araçatuba. Adotam-se procedimentos bibliométricos de análise de citação relacional associados à Análise de Redes Sociais. Como resultados observou-se uma sobreposição moderada de identidade de citação entre as duas unidades de ensino para o grupo de disciplinas do eixo básico e o grupo de disciplinas de Processo de Produção Agrícola, Gestão, Projeto de Trabalho de Graduação e Transversais. Por outro lado, a sobreposição mostrou-se menos significativa para o eixo de disciplinas Processos de Produção de Biocombustíveis. Conclui-se que a metodologia adotada permitiu caracterizar o domínio científico fundante da formação do tecnólogo em Biocombustíveis, em suas duas unidades de ensino, assim como identificar suas similaridades e especificidades quanto às suas identidades de citação, constituídas a partir das referências adotadas nas disciplinas

Scientific Production on Open Access: A Worldwide Bibliometric Analysis in the Academic and Scientific Context

This research aims to diachronically analyze the worldwide scientific production on open access, in the academic and scientific context, in order to contribute to knowledge and visualization of its main actors. As a method, bibliographical, descriptive and analytical research was used, with the contribution of bibliometric studies, especially the production indicators, scientific collaboration and indicators of thematic co-occurrence. The Scopus database was used as a source to retrieve the articles on the subject, with a resulting corpus of 1179 articles. Using Bibexcel software, frequency tables were constructed for the variables, and Pajek software was used to visualize the collaboration network and VoSViewer for the construction of the keywords’ network. As for the results, the most productive researchers come from countries such as the United States, Canada, France and Spain. Journals with higher impact in the academic community have disseminated the new constructed knowledge. A collaborative network with a few subnets where co-authors are from different countries has been observed. As conclusions, this study allows identifying the themes of debates that mark the development of open access at the international level, and it is possible to state that open access is one of the new emerging and frontier fields of library and information science