Google Scholar Metricsan unreliable tool for assessing scientific journals

  1. Delgado López-Cozar, Emilio 1
  2. Cabezas Clavijo, Álvaro 1
  1. 1 Universidad de Granada
    info

    Universidad de Granada

    Granada, España

    ROR https://ror.org/04njjy449

Revista:
El profesional de la información

ISSN: 1386-6710 1699-2407

Año de publicación: 2012

Volumen: 21

Número: 4

Páginas: 419-427

Tipo: Artículo

DOI: 10.3145/EPI.2012.JUL.15 DIALNET GOOGLE SCHOLAR lock_openAcceso abierto editor

Otras publicaciones en: El profesional de la información

Resumen

Se presenta Google Scholar Metrics (GSM), el nuevo producto bibliométrico de Google, que computa el índice h de revistas y otras fuentes de información científica. Se exponen las principales características de GSM, y se realiza una revisión crítica de sus posibilidades como herramienta para la evaluación de revistas científicas. Se estudia, entre otros aspectos, su cobertura, la inclusión de repositorios junto a las revistas científicas, el control bibliográfico de la información, y las posibilidades de consulta y visualización de resultados. Se concluye que, pese a las potencialidades de Google Scholar como fuente para la evaluación científica, GSM es un producto inmaduro y con múltiples limitaciones por lo que no se aconseja su uso con fines evaluativos. Igualmente se plantea que la mejora de sus prestaciones, posicionaría a GSM como una seria competencia para los productos de evaluación de revistas existentes en el mercado de la información científica.

Información de financiación

This work has been funded under the project HAR2011-30383-C02-02 of the Dirección General de Investigación y Gestión of the Plan Nacional de I+D+I. Ministerio de Economía y Competitividad.

Financiadores

Referencias bibliográficas

  • Aguillo, Isidro F. "Is Google Scholar useful for bibliometrics? A webometric analysis". Scientometrics, 2012, v. 91, n. 2, pp. 343-351. http://dx.doi.org/10.1007/s11192-011-0582-8
  • Braun, Tibor; Glänzel, Wolfgang; Schubert, Andràs. "A Hirsch-type index for journals". Scientometrics, 2006, v. 69, n. 1, pp. 169-173. http://dx.doi.org/10.1007/s11192-006-0147-4 (Pubitemid 44386718)
  • Butler, Declan. "Computing giants launch free science metrics". Nature, 2011, v. 476, n. 7358, p. 18. http://dx.doi.org/10.1038/476018a
  • Cabezas-Clavijo, Álvaro; Delgado-López-Cózar, Emilio. "¿Es posible usar Google Scholar para evaluar a las revistas científicas nacionales en los àmbitos de Ciencias Sociales y Jurídicas? El caso de las revistas españolas". EC3 Working papers, 2012a, n. 3. http://eprints.rclis.org/handle/10760/16888
  • Cabezas-Clavijo, Álvaro; Delgado-López-Cózar, Emilio. "Las revistas españolas de Ciencias Sociales y Jurídicas en Google Scholar Metrics, ¿estàn todas las que son?". EC3 Working papers, 2012b, n. 2. http://eprints.rclis.org/handle/ 10760/16892
  • Cabezas-Clavijo, Álvaro; Delgado-López-Cózar, Emilio. "Scholar Metrics: the impact of journals according to Google, just an amusement or a valid scientific tool?". EC3 Working papers, 2012c, n. 1. http://eprints.rclis.org/handle/10760/16836
  • Cabezas-Clavijo, Álvaro; Torres-Salinas, Daniel. "Google Scholar Citations y la emergencia de nuevos actores en la evaluación de la investigación". Anuario ThinkEPI, 2012, n. 6, pp. 147-153. http://eprints.rclis.org/handle/10760/16924
  • Costas, Rodrigo; Bordons, María. "Una visión crítica del índice h: algunas consideraciones derivadas de su aplicación pràctica". El profesional de la información, 2007, v. 16, n. 5, pp. 427-432. http://dx.doi.org/10.3145/ epi.2007.sep.04
  • Delgado-López-Cózar, Emilio; Marcos-Cartagena, Diego; Cabezas-Clavijo, Álvaro; Jiménez-Contreras, Evaristo; Ruiz-Pérez, Rafael. Índice H de las revistas españolas de Ciencias Jurídicas según Google Scholar (2001-2010). 2012a. http://hdl.handle.net/10481/20234
  • Delgado-López-Cózar, Emilio; Marcos-Cartagena, Diego; Cabezas-Clavijo, Álvaro; Jiménez-Contreras, Evaristo; Ruiz-Pérez, Rafael. Índice H de las revistas españolas de Ciencias Sociales según Google Scholar (2001-2010). 2012b. http://hdl.handle.net/10481/20235
  • Delgado-López-Cózar, Emilio; Orduña-Malea, Enrique; Marcos-Cartagena, Diego; Jiménez-Contreras, Evaristo; Ruiz-Pérez, Rafael. "Journal Scholar: Una alternativa internacional, gratuita y de libre acceso para medir el impacto de las revistas de Arte, Humanidades y Ciencias Sociales". EC3 Working papers, 2012c, n. 5. http://digibug.ugr.es/ handle/10481/20375
  • Delgado-López-Cózar, Emilio. "Los repositorios en Google Scholar Metrics o ¿qué hace un tipo documental como tú en un lugar como ese?". EC3 Working papers, 2012, n. 4. http://digibug.ugr.es/handle/10481/20236
  • Delgado-López-Cózar, Emilio; Robinson-García, Nicolàs; Torres-Salinas, Daniel. "Manipulating Google Scholar Citations and Google Scholar Metrics: simple, easy and tempting". EC3 Working papers, 2012, n. 6. http://digibug.ugr.es/handle/10481/20469
  • Franceschet, Massimo. "A comparison of bibliometric indicators for computer science scholars and journals on Web of Science and Google Scholar". Scientometrics, 2010, v. 83, n. 1, pp. 243-258. http://dx.doi.org/10.1007/s11192-009-0021-2
  • Harzing, Anne-Wil K.; Van der Wal, Ron. "Google Scholar as a new source for citation analysis". Ethics in science and environmental politics, 2008, v. 8, n. 1, pp. 61-73. http://dx.doi.org/10.3354/esep00076 (Pubitemid 351836494)
  • Hodge, David R.; Lacasse, Jeffrey R. "Ranking disciplinary journals with the Google Scholar h-index: A new tool for constructing cases for tenure, promotion, and other professional decisions". Journal of social work education, 2011 v. 47, n. 3, pp. 579-596. http://dx.doi.org/10.5175/JSWE.2011. 201000024
  • Jacsó, Péter. "Google Scholar: the pros and the cons". Online information review, 2005, v. 29, n. 2, pp. 208-214. http://dx.doi.org/10.1108/14684520510598066 (Pubitemid 40626395)
  • Jacsó, Péter. "Google Scholar revisited". Online information review, 2008a, v. 32, n. 1, pp. 102-114. http://dx.doi.org/10.1108/ 14684520810866010 (Pubitemid 351332195)
  • Jacsó, Péter. "The pros and cons of computing the h-index using Google Scholar". Online information review, 2008b, v. 32, n. 3, pp. 437-452. http://dx.doi.org/10.1108/14684520810889718
  • Jacsó, Péter. "Calculating the h-index and other bibliometric and scientometric indicators from Google Scholar with the Publish or Perish software". Online information review, 2009, v. 33, n. 6, pp. 1189-1200. http://dx.doi.org/10.1108/14684520911011070
  • Jacsó, Péter. "Metadata mega mess in Google Scholar". Online information review, 2010, v. 34, n. 1, pp. 175-191. http://dx.doi.org/10.1108/14684521011024191
  • Jacsó, Péter. "Google Scholar duped and deduped - the aura of robometrics". Online information review, 2011, v. 35, n. 1, pp. 154-160. http://dx.doi.org/10.1108/14684521111113632
  • Jacsó, Péter. "Google Scholar author citation tracker: is it too little, too late?". Online information review, 2012, v. 36, n. 1 pp. 126-141. http://dx.doi.org/10.1108/14684521211209581
  • Jamali, Hamid R.; Asadi, Saeid. "Google and the scholar: the role of Google in scientists' information-seeking behaviour". Online information review, 2010, v. 34, n. 2, pp. 282-294. http://dx.doi.org/10.1108/ 14684521011036990
  • Moussa, Salim; Touzani, Mourad. "Ranking marketing journals using the Google Scholar-based hg-index". Journal of informetrics, 2010, v. 4, n. 1, pp. 107-117. http://dx.doi.org/10.1016/j.joi.2009.10.001
  • Nicholas, David; Williams, Peter; Rowlands, Ian; Jamali, Hamid R. "Researchers' e-journal use and information seeking behaviour". Journal of information science, 2010, v. 36, n. 4, pp. 494-516. http://dx.doi.org/10.1177/0165551510371883
  • Onyancha, Omwoyo-Bosire. "A citation analysis of sub-Saharan African library and information science journals using Google Scholar". African journal of library, archives and information science, 2009, v. 19, n. 2, pp. 101-116.
  • Torres-Salinas, Daniel; Ruiz-Pérez, Rafael; Delgado-López- Cózar, Emilio. "Google Scholar como herramienta para la evaluación científica". El profesional de la información, 2009, v. 18, n. 5, pp. 501-510. http://dx.doi.org/10.3145/ epi.2009.sep.03