Quantifying the quality of peer reviewers through Zipf's law

This paper introduces a statistical and other analysis of peer reviewers in order to approach their "quality" through some quantification measure, thereby leading to some quality metrics. Peer reviewer reports for the Journal of the Serbian Chemical Society are examined. The text of each report has first to be adapted to word counting software in order to avoid jargon inducing confusion when searching for the word frequency: e.g. C must be distinguished, depending if it means Carbon or Celsius, etc. Thus, every report has to be carefully "rewritten". Thereafter, the quantity, variety and distribution of words are examined in each report and compared to the whole set. Two separate months, according when reports came in, are distinguished to observe any possible hidden spurious effects. Coherence is found. An empirical distribution is searched for through a Zipf-Pareto rank-size law. It is observed that peer review reports are very far from usual texts in this respect. Deviations from the usual (first) Zipf's law are discussed. A theoretical suggestion for the "best (or worst) report" and by extension "good (or bad) reviewer", within this context, is provided from an entropy argument, through the concept of "distance to average" behavior. Another entropy-based measure also allows to measure the journal reviews (whence reviewers) for further comparison with other journals through their own reviewer reports.Comment: 28 pages; 8 Tables; 9 Figures; 39 references; prepared for and to be published in Scientometric

Producción científica en educación relacionada con la legislación y la administración: un análisis cienciométrico

Contenido de la investigación: El objetivo general de esta investigación fue analizar la producción sobre legislación y educación en la categoría " Business, Management and Accounting" a través de un estudio cienciométrico de las publicaciones indexadas en la base de datos de SCOPUS. Las hipótesis fueron que los artículos de investigación en legislación y educación en la categoría Negocios, Gestión y Contabilidad en las revistas indexadas en SCOPUS en el período de estudio verifican las principales leyes cienciométricas: Lotka y Bradford y que la colaboración entre autores en esta producción científica es principalmente de carácter local o nacional. El objetivo general fue desglosado en 6 objetivos específicos: El primer objetivo fue conocer el desarrollo diacrónico de la producción científica en educación relacionada con la legislación e indexada en SCOPUS (Business, Management and Accounting). Toda la producción se encontró en el período entre 1970 y 2019, mientras que ha habido un aumento gradual en el volumen de producción hasta el año 2002, alcanzando el pico máximo en 2002, pero desde entonces, ha habido una disminución. Además, no hubo un patrón de crecimiento continuo, sino que se evidencian diversas fluctuaciones. Al principio del periodo estudiado, no se encontró producción durante cuatro años seguidos y entre 1999 y 2000 se ha producido un descenso de la producción, con una Tasa de Variación Interanual (TVI) negativa igual a -47, y en 2008, con una Tasa de Variación Interanual (TVI) negativa igual a -45, mientras que la TVI positiva más alta (sin tener en cuenta el incremento de 1975, ya que hubo 4 años sin producción) se alcanzó en 2001 con un valor de 207. En general, se ha pasado de producir 36 documentos en 1975 a 1052 en 2020; es decir, se trata de un incremento porcentual del 4072%. La media de documentos publicados es de 711 al año. En cuanto a la tasa anual de cambio, la tasa más alta se ha identificado en 1975, seguida de 1978. Comparando nuestro resultado con los resultados de Lopera-Pérez et al (2021), quienes realizaron un análisis bibliométrico de la producción científica internacional sobre Educación Ambiental en la Web of Science (WoS) dentro de las categorías Educación e Investigación Educativa y Educación, Disciplinas Científicas para las últimas dos décadas (2000-2019). Sus resultados mostraron el acelerado incremento de la producción de conocimiento en esta área, y presentan los principales contextos de investigación, así como algunas perspectivas educativas y de investigación. Dichos resultados contrastan con los nuestros, ya que encontramos una disminución de la producción desde 2002. En la misma línea, Gantman y Fernández (2017) analizaron la producción de literatura académica en español sobre estudios de organización y gestión entre 2000 y 2010 indexada en el Catálogo Latindex. El segundo objetivo consistió en describir e identificar las diferentes relaciones de redes de conocimiento que se generan. Se encontró que existe una colaboración relativamente baja (1,7) en la autoría en esta área, pero esta situación ha ido cambiando con los años. La colaboración entre autores y universidades fue identificada por Lopera-Pérez et al (2021), lo cual coincide con nuestros resultados, ya que se encontró que la colaboración comenzó a despegar y su incremento es notorio a partir del año 2008. El tercer objetivo consistió en visualizar las redes de colaboración nacionales e internacionales, tanto a nivel de autoría como a nivel institucional, e identificar patrones de colaboración. Este objetivo se responde en el apartado 6.1.6, donde se ha constatado que la mayoría han sido de autoría única, y los firmados por dos o tres autores representan un tercio del total. El patrón de autoría ha sufrido cambios en el periodo, pasando de un inicio en 1975 con predominancia en la publicación de documentos con autoría única frente a los de autoría múltiple hasta invertir la relación en 2019. El cuarto objetivo consistió en identificar los patrones de citación y colaboración. El análisis de las citas en las revistas analizadas indicó que el 39,7% de la producción no había recibido ninguna cita. Del total de documentos citados, el 12,6% sólo han sido citados una vez, y el 8,3% dos veces. El artículo más citado tiene 855 citas. Además, en cuanto a los años en los que se han realizado estas citas, el mayor porcentaje fue en 2003 con 944 citas, seguido de 2007 con 905 citas. En cuanto a los patrones de colaboración, al analizar en detalle el número de autores, se encontró que el 58,21% fueron de autoría única, y los firmados por dos o tres autores representaron el 34,37% del total. La media anual de los documentos sin colaboración resultó estar por encima de la media, lo que podría inducir que hay casi igualdad entre los documentos sin colaboración y los que sí la tienen. Sin embargo, este valor se debe en gran medida a los primeros años dentro del rango de estudio. La colaboración comenzó a despuntar y su aumento es notable a partir del año 2008. Por último, se determinaron los valores de los tres indicadores de colaboración más frecuentes en la literatura. Así, el grado de colaboración en el periodo es DC =0,66. El valor mínimo se produjo en 2002 y el máximo en 1970. Este valor fue casi similar al obtenido por las revistas de educación publicadas en Brasil (0,636) (Madrid, et al, 2017) y cercano al encontrado para el GD (0,75) en las publicaciones científicas colombianas en SciELO (Maz-Machado, Jiménez-Fanjul y Villarraga-Rico, 2016). Sin embargo, fue superior al encontrado para las categorías SSCI Demografía (0,605) y Estudios Urbanos (0,591) (Maz-Machado y Jiménez-Fanjul, 2018). El quinto objetivo consistió en establecer valores para los indicadores de la dimensión cuantitativa de la producción científica sobre el tema. A este objetivo se responde en el apartado 6.2.1 y 6.2.2. Se verificó la Ley de Bradford con las revistas que conforman el núcleo de Bradford siendo Chronicle of Higher Education y Journal of Management Education y estas dos acumulan 11526 documentos. Además, se verificó la ley de Lotka para el conjunto de autores que publicaron en las revistas objeto de estudio. El sexto y último objetivo fue identificar los temas abordados. Este objetivo se responde en el apartado 6.1.8. Se comprobó que los temas estaban relacionados con Gestión y Liderazgo en Educación, Educación Infantil, Educación Superior, Marketing en Educación, Educación Contable, Educación y Trabajo, Educación Turística, Educación en Salud Mental y Educación en Organización Industrial. Conclusión: Se ha realizado un análisis cienciométrico de la producción científica Business, Management and Accounting indexada en Scopus, donde se ha constatado los cambios sustanciales durante el periodo analizado desde 1970 hasta 2019, tanto a nivel de producción, como de colaboración entre autores y universidades, así como un análisis de la dimensión cuantitativa de la producción verificando leyes habituales en un estudio de estas características como la Ley de Bradford, Lotka y Bradford

Repercussions of media coverage on science? A critical assessment of a popular thesis

The topic of this paper is the relationship between journalism and science. In order to describe a potentially relevant dynamic in this relationship, the German sociologist of science Peter Weingart proposed the term "medialization." It describes phenomena of change within science, such as the oversimplification or exaggeration of research findings, which are associated with an increased need for public attention within science. This concept focuses on the repercussions of journalism on science. Inscribed in the term is the assumption that journalism potentially has great social significance. At the very least, journalism, or the mass media it dominates, is thought to influence processes of change within science. The paper aims to assess the social impact of science reporting in order to plausibilize the significance of the role played by journalism. This is based on recent, partly unpublished empirical findings by a German-French DFG/ANR project, which relate to the ability of journalism to focus public attention on scientific events and actors. The results are essentially negative, in the sense that journalism hardly, or at best only very sporadically, succeeds in focusing public attention on individual scientific events or actors. Based on the journalism’s very limited performance in this regard, we consider it implausible that journalism could be as significant a factor as the concept of medialization indicates

Study of the long tail formation within an ewom community. The case of ciao UK

Continuous communication among people and ubiquitous online access are fundamental characteristics of online eWOM communities that are facilitating the distribution of a broad range of products and services. eWOM communities have emerged to influence customers directly and create interest with efficacy and flexibility in spite of geographic boundaries (Duan, Gu and Whinston 2008). They provide rich and objective product information that is influencing customers’ decision making (Gu, Tang and Whinston 2013, Kim and Gupta 2009, Zacharia, Moukas and Maes 2000), due to the credibility, empathy and relevance they offer to customers as opposed to the information provided by marketer-designed websites (Bickart and Schindler 2001). Through eWOM, users can freely post their reviews about any product or service, and share those reviews with other users in order to better understand a product (Hennig-Thurau, et al. 2004). Thus, through eWOM communities, a great audience of users is able to acquire knowledge from reviews concerning products and services that are less popular to the majority. In that respect, the distribution of product sales is changing due to the increment of product information available to consumers (Brynjolfsson, Hu, & Smith, 2010) facilitating the long tail phenomenon (Anderson 2004). Many authors have given a good understanding of the main idea behind long tail within sales distributions in product markets such as Amazon (Brynjolfsson, Hu, & Smith, 2003; Brynjolfsson, Hu, & Smith, 2010). However, this Thesis goes beyond and applies new methodologies –elbow criterion– and extends others –power-law distribution– by Clauset, Shalizi and Newman (2009) to mathematically measure the long tail in other environments, such as the eWOM community Ciao. Whereas most eWOM studies focus just on the potential of eWOM facilitating the long tail effect to find rare or niche products (Hennig-Thurau, Gwinner, Walsh, & Gremler, 2004; Khammash & Griffiths, 2011) and how eWOM is enabling zero-cost dissemination of information about products (Odić, Tkalčič, Tasič, & Košir, 2013) and so forth, not many noticed that for each product type enclosed in the tail of the sales distribution there might be different impacts. In this regard, the results within this Thesis might indicate that vendors could adopt alternative product strategies depending on with which niche product type (search or experience good) the tails of sales distribution would be formed. More specifically, this Thesis proposes an approach for detecting whether there is a long tail for each product type and thus, cases should be differentiated when niche products represent a significant portion of overall product sales. Likewise, given the volume of the user-generated content in the web and its speed of change this Thesis also presents two important highlights in this regard. First, the implementation of an effective web crawler that can gather and identify big amounts of user-generated content. Second, the stages followed on this crawling process, which are the identification and collection of important data, and the maintenance of the gathered data. Consequently, social science needs to develop adequate methodologies to deal with huge amounts of data, such as the one outlined within this Thesis and overcome the distance between technology and social sciences. The chosen methodology within this Thesis has been to triangulate the method of power-law distribution of data gathered with other method, the elbow criterion in order to identify the long tail. That is, to compare the all the type of products among the eWOM Ciao UK, the probability power-law distribution function was represented as a tool to measure the long tail. Besides, to extra validate such method the elbow criterion was also used to identify where was located the optimal cut-off point that distinguishes the products characterized by the long tail. Furthermore, this Thesis outlines an architectural framework and methodology to gather user-generated data the eWOM community Ciao UK. To that end, a new methodology describes the implementation of a web crawler from other disciplinary perspective: the computing science discipline. Interestingly, the present thesis aims to contribute to the study of the long tail phenomenon in an eWOM community and what product types are enclosed there. To this end the three following hypotheses where contrasted: H1: The experience products from the distribution of product categories within an eWOM are more likely to exhibit a long tail. H2: The search products from the distribution of product categories within an eWOM are less likely to exhibit a long tail. H3: The distribution of product categories within an eWOM that have high frequency events or super-hits in the short head are not particularly associated with search or experience products. The results supported all the three proposed hypotheses. In this sense, this Thesis presents important new findings. Firstly, it is evidenced that products having a long tail are those with subjective evaluation standards, which are classified as experience products. Secondly, it is also corroborated that search products, which have a high level of objective attributes in the total product assessment do not encourage the long tail phenomenon. Thirdly, there is a combination of products when there are super-hits in the short head of the distribution. Thus, those are not particularly associated with search or experience products since they contain either objective or subjective evaluation standards. Finally, it is also remarkable to highlight that not all the categories fitting a power-law distribution are characterized by a long tail and on the contrary, some of those having a long tail do not fit a power-law. In general, the findings also suggest the potentials of eWOM, which, in general, might generate a long tail effect, where a large number of small-volume vendors coexist with a few high-volume ones. Furthermore, this Thesis has contributed to both theory and practice, essentially, in three different ways: (1) with a methodology of collection of online user-generated data in the context of social sciences; (2) with the development of two more accurate methods to identify niche products within an eWOM community, providing a deeper understanding of the long tail phenomena and the type of products; and (3) with publications of refereed journals papers (indexed in JCR/JSCR) as well as conference papers related to the main topic of this Thesis.Premio Extraordinario de Doctorado U

Fire Type Classification in the Brazilian Tropical Moist Forest Biome

The Brazilian Tropical Moist Forest Biome (BTMFB) is “Earth’s greatest biological treasure and a major component of the earth system” and forest degradation and deforestation by fire is a serious issue in this region. Fires in the BTMFB can be broadly classified as maintenance, deforestation and forest fire types. Spatially and temporally explicit information on the incidences of fire types are important as they have widely varying atmospheric emissions and ecological impacts. Satellite based remote sensing is a practical means of monitoring the BTMFB that spans almost 4 million km2. However, there has been no way to reliably classify satellite active fire type to date. In this work, methods to characterize MODIS active fire detections are developed using physically based and geographic context/proximity approaches. The research methodology is developed by addressing four hypotheses concerning differences among active fire type characteristics including factors that drive and mediate fire in the BTMFB. Differences in the active fire characteristics among different fire types are presented and discussed. The spatio-temporal distribution of fire types over 8 year (2003-2010) period is documented, analyzed and presented. This dissertation has, to date, resulted in one published, one in press, and one submitted paper