ANEXO II ie-CSIC ÍNDICE DE EDITORIALES CSIC MANUAL DE PCO VICEPRESIDENCIA DE INVESTIGACIÓN CIENTÍFICA Y TÉCNICA Versión 2.0 noviembre 2018 1 2 Índice de Editoriales CSIC (ie-CSIC v. 2.0): justificación y metodología Noviembre de 2018 Presentación Desde el año 2008 se lleva a cabo una evaluación anual de la producción científica de los investigadores del CSIC en la que se valora el cumplimiento de distintos objetivos. Un apartado importante es el correspondiente a la publicación anual de libros y capítulos de libro. Como en el caso de los artículos publicados en revistas científicas, la producción en libros y capítulos de libro se clasifica en publicaciones de impacto o valor alto, medio o bajo, dependiendo de la editorial en que aparezcan editadas. Durante años, la valoración de las editoriales ha dependido de las evaluaciones puntuales de las distintas comisiones de área, no llegando a hacerse nunca un listado público que permitiera a los investigadores conocer por anticipado cómo se valoraba la publicación en una u otra editorial. Con el fin de corregir esta situación, se intentó recurrir a instrumentos y listados de valoración editorial externos, pero desgraciadamente ninguno se adaptaba a las necesidades de una institución como el CSIC. En un informe solicitado en junio de 2015 por la Coordinación de Área de Humanidades y Ciencias Sociales a las investigadoras del CSIC, Elea Giménez Toledo y María Bordons, especialistas en evaluación bibliométrica, se informaba sobre tal situación y se hacía una propuesta de posibles listados o índices de referencia. A partir del análisis de ese informe interno, en junio de 2016 se inició por indicación de la Vicepresidencia de Investigación Científica y Técnica un procedimiento para la ordenación y revisión de todas las editoriales científicas que constaban en los registros de la base de producción científica institucional, conCIENCIA. Se constató que a efectos de evaluación de la producción en libros y capítulos de libro, y debido a la dificultad de evaluar publicación a publicación, lo más adecuado habría sido una valoración de las series o colecciones en las que en su mayoría aparecen publicados. Sin embargo, ante las dificultades existentes hoy en día para alcanzar este objetivo, se decidió que lo más realista era proceder antes a la elaboración de un índice general de editoriales. En él, las editoriales debían estar recogidas de forma clara y correcta, con una única entrada por editorial y una valoración de su relevancia. Igualmente se consideró que esa valoración debería basarse en datos objetivos y externos, a partir de la consulta simultánea de los posibles instrumentos de referencia existentes en materia de evaluación editorial. El desarrollo del trabajo ha corrido a cargo de Vito Ciao, bajo la dirección de Sylvia Fernández, en la Vicepresidencia Adjunta de Áreas Científico- Técnicas, con la coordinación de José Antonio Berenguer. En una primera fase, fue necesario, por lo tanto, hacer una revisión de todos los datos existentes en conCIENCIA, para que cada editorial tuviera un nombre homogéneo, eliminando todas las variantes y erratas presentes en los archivos. A continuación, se decidió contrastar los datos relativos a las editoriales con los procedentes de 5 índices reconocidos a nivel nacional e internacional, desechando otros índices posibles por razones de falta de claridad, transparencia o actualización de los datos que contenían. Los índices finalmente empleados han sido: 3 1. Book Citation Index (Thomson Reuters) 2. Scholarly Publishers Indicators (SPI) / Prestigio editorial (Grupo ILIA/CSIC). 3. Scopus Book Titles (Elsevier) 4. Norwegian list (NSD) 5. Publication Forum (Federation of Finnish Learned Societies) (incorporado para esta versión 2 de 2018) Metodología Book Citation Index (BCI) El Book Citation Index (BCI), elaborado por Clarivate, recoge libros evaluados positivamente de acuerdo con una serie de requisitos de calidad. En la actualidad, 457 editoriales cuentan con libros en el BCI (en realidad figuran 508, pero algunas aparecen repetidas en entradas diferentes). Se ha considerado que una editorial que cuente con publicaciones en el BCI debe tener un valor Alto. Scholarly Publishers Indicators in Humanities and Social Sciences (SPI) Scholarly Publishers Indicators in Humanities and Social Sciences (SPI) es un índice elaborado por el grupo de investigación ILIA del CSIC. A diferencia de otros índices: 1) la evaluación está basada en la opinión manifestada por investigadores españoles sobre las editoriales a través de encuestas; 2) se refiere exclusivamente al área de Humanidades y Ciencias Sociales; 3) las editoriales se distribuyen en nacionales y extranjeras; 4) tanto en las editoriales nacionales como extranjeras, hay un ranking general y otro por disciplinas (16 disciplinas). Por lo tanto, se ha trabajado con 32 listados por disciplinas (16 nacionales y 16 extranjeros) y 2 listados generales. Los datos relativos a las editoriales en el sitio de internet de SPI están distribuidos en tres columnas, donde figuran el número de posición, el nombre de la editorial y el denominado valor ICEE. El número de posición de la editorial depende del valor ICEE, que se calcula a través de una fórmula estadística, a partir de los datos obtenidos en las encuestas. El procedimiento para unificar los diferentes listados de SPI en uno solo, fue el siguiente: 1) se mantuvo la distinción entre editoriales nacionales y no nacionales; 2) los listados generales se conservaron con sus valores ICEE correspondientes; 3) los 16 listados de editoriales nacionales por disciplina se cruzaron entre sí y se tomó el valor más alto de ICEE de cada editorial en todas las disciplinas; 4) se hizo lo mismo con los 16 listados por disciplina de editoriales extranjeras. Se obtuvo así 4 listados finales (uno nacional general, uno nacional por áreas, uno extranjero general y uno extranjero por áreas). Cada uno de estos listados fue dividido en terciles, asignando un valor a cada tercil (Q1=8, Q2=4 y Q3=2). A continuación, los dos listados de editoriales nacionales se fusionaron en uno haciendo el promedio de los valores asignados a las editoriales en el listado general y en el listado por áreas. El mismo procedimiento se realizó con las editoriales extranjeras. Finalmente se unificaron los dos listados (nacional y extranjero) en un único listado de 1.056 editoriales. Las editoriales con un valor de 8 en este listado fueron consideradas editoriales de valor Alto y las que alcanzaron un valor entre 6 y 2 fueron consideradas editoriales de valor Medio. 4 Scopus Book Titles (Scopus) Scopus Book Titles (Scopus) es una base de datos de libros elaborada por Elsevier. Al igual que el BCI, trata de recoger libros que cumplan con requisitos de calidad, publicados por las editoriales más prestigiosas del mundo en todos los ámbitos científicos. En el sitio de internet de Scopus no hay un listado de editoriales, sino que hay uno de libros y otro de series o colecciones de libros (Book Title List). De ambos listados se extrajeron las editoriales correspondientes, creando un listado único de 497 editoriales. Como en el caso de BCI, se decidió que todas estas editoriales tendrían un valor Alto. Norwegian Register for Scientific Journals, Series and Publishers El Norwegian Register for Scientific Journals, Series and Publishers, elaborado por el Norwegian Centre for Research Data (NSD), es un listado de editoriales categorizadas según criterios de calidad y relevancia. En la práctica, se asigna a cada editorial un valor que puede ser 0, 1 o 2, siendo 2 el más alto. Tras una primera labor de homologación y regularización del nombre de las editoriales, se obtuvo un listado de 2.756 editoriales. Se ha considerado que son editoriales de valor Alto en ie-CSIC las que están registradas en el Norwegian Register con valor 2, son de valor Medio aquellas cuyo valor en el Norwergian Register es 1 y Bajo las marcadas con 0. Publication Forum (Federation of Finnish Learned Societies) El Publication Forum, elaborado por la Federation of Finnish Learned Societies, es un sistema de calificación y clasificación de editoriales nacionales e internacionales de todas las disciplinas científicas realizado para respaldar la evaluación de la calidad del resultado de la investigación. La clasificación cuenta con tres niveles de valor: nivel bajo (1), nivel medio (2), nivel alto (3). Tras una primera labor de homologación y regularización de nombres de las editoriales, se obtuvo un listado de 1.275 editoriales. Se ha considerado que son editoriales de valor Alto en el ie-CSIC las que están registradas en el Publication Forum con valor 3, son de valor Medio aquellas cuyo valor en el Publication Forum es 2 y Bajo las marcadas con 1. Valor de las coediciones Se incluye en ie-CSIC una serie de coediciones que aparecen en más de un registro de conCIENCIA. Para obtener el valor de las coediciones, se ha tomado del listado de ie-CSIC el valor asignado individualmente a cada una de las entidades que participan en la coedición. Este valor se ha traducido en un valor numérico: Alto=6, Medio=4 y Bajo=2. Se han sumado los valores de las entidades coeditoras y se ha hecho la media. El resultado se ha distribuido de la siguiente forma: Desde 0 hasta 2,5 = Bajo Desde 2,6 hasta 4,5 = Medio Desde 4,6 hasta 6 = Alto. 5 Datos generales del ie-CSIC (versión 2. correspondiente a 2018) 6.681 es el número total de editoriales/editores (6.623) y coediciones (58) recogidas en esta segunda versión del ie-CSIC. En relación a estas últimas, solamente se han incluido en el listado las coediciones registradas en conCIENCIA más de una vez. 1.078 editoriales/editores y coediciones están clasificadas con valor Alto. Aquí se incluyen todas las editoriales que aparecen en BCI y Scopus Book Titles, las que tienen valor 8 en SPI, 2 en el Norwegian Register, 3 en el Publication Forum y las coediciones que tienen valores entre 4,6 y 6.