Archives de catégorie : Bibliométrie

Saisir l’objet mouvant de la prédation dans la communication scientifique

(par Innocent Azilan, co-responsable de l’URFIST de Lyon entre septembre 2024 et août 2025, et doctorant en SIC)

Prédation. Ce n’est (vraisemblablement) pas un mot qui rime avec science, laquelle renvoie à rigueur et vérité (Popper, 2003). Pourtant, s’il y a deux cancers qui gangrènent actuellement le champ de la communication scientifique, ce sont bien les logiques d’enclosure (Carmes & Pélissier, 2013) et la prédation qui touche ce champ. Si le libre accès est une réponse à la première, il a, malgré lui, créé les conditions qui ont fait germer la seconde.  Mais la prédation est un objet mouvant. Tout l’enjeu est de la cerner.

1- Essai de définition de la prédation scientifique

Dans l’édition scientifique, on doit la notion de « revue/éditeur prédateur » au bibliothécaire universitaire américain, expert en bibliométrie, Jeffrey Beall (Cirasella & Berger, 2017) qui a commencé à alerter sur le phénomène. Beall s’est alors lancé dans une entreprise périlleuse ; recenser des éditeurs et des revues « potentiellement prédateurs ». Il publiait et actualisait régulièrement sur son blog Scholarly Open Access, qui a popularisé la “liste de Beall” (Beall, 2013). Cette liste est rapidement devenue une référence importante, largement consultée par les bibliothécaires, les chercheurs et les défenseurs de l’accès ouvert pour repérer les pratiques douteuses (Demir, 2018).

Mais rapidement, la méthodologie mise en place par Beall a été critiquée pour sa défaillance (Cirasella & Berger, 2017). Plusieurs auteurs soulignent que ses critères hétérogènes, parfois formulés de manière générale ou ambiguë et non pondérés, ne sont ni entièrement publiés ni appliqués de façon traçable, ce qui rend l’évaluation peu reproductible (Couture, 2017, Kendall, 2021). Sur le plan procédural, Beall décidait seul des inclusions/suppressions, sans comité d’arbitrage, sans procédure d’appel ni transparence sur les preuves mobilisées. En outre, la confusion entre « éditeurs » et « revues » a pu conduire à l’exclusion en bloc de titres n’ayant pas fait l’objet d’une analyse au cas par cas (Kendall, 2021 ; Berger & Cirasella, 2017).

Plusieurs travaux contestent aussi la logique binaire de cette liste qui consiste à séparer « bonnes » et « mauvaises » revues, au détriment d’un continuum de pratiques et de contextes éditoriaux, avec un risque de stigmatisation et de biais géographiques ou institutionnels (Eriksson & Helgesson, 2018 ; Boukacem-Zeghmouri et al. , 2022). Sur le plan normatif, il a été documenté que Beall adopte une position critique à l’égard du Libre Accès, qu’il assimile fréquemment au seul modèle auteur-payeur, tout en défendant les modèles des grands éditeurs commerciaux (dont Elsevier) ; ce qui a nourri le soupçon de biais pro-éditeurs dans ses jugements (Berger & Cirasella, 2017). Mais dans tous les cas, les critiques ont porté moins sur l’idée de signaler des pratiques prédatrices que sur des défauts de méthode. Mills & Inouye (2020)  jugent d’ailleurs le terme « prédation » trop large, car « inconduites » avec « mauvaise qualité ». Ces derniers précisent que le concept omet de prendre en compte la gamme complexe de facteurs institutionnels, économiques et politiques qui influencent les décisions individuelles de publication.

Face à ces critiques et aux biais de cadrage, une définition de consensus a été proposée par un groupe international de chercheurs et d’acteurs de l’édition. Sont prédatrices les entités « qui priorisent leur intérêt propre au détriment de la science» (Grudniewicz et al., 2019). Cette définition déplace l’attention des seules modalités économiques vers des indices vérifiables de comportement et d’intention, parmi lesquels : (1) promesses irréalistes de délais (« évaluation en 72 h », « acceptation garantie ») et absence de description crédible du processus d’évaluation ; (2) faux affichages (usurpation de membres de comités éditoriaux, logos d’indexation ou « facteurs d’impact » fictifs, confusion volontaire entre ISSN, titres proches de revues reconnues) ; (3) opacité des politiques (aucune information claire sur l’éthique, les conflits d’intérêts, la gestion des données, les retraits et corrections) ; (4) pratiques commerciales trompeuses (sollicitations massives, frais cachés ou exigés après acceptation, démarchage de numéros spéciaux « clé en main ») ; (5) défaillances éditoriales (plagiat non détecté, absence d’archivage pérenne, licences floues, révisions de pure forme).

Des travaux de sociologie et d’histoire de la communication scientifique montrent par ailleurs que la « prédation » s’inscrit dans des dynamiques plus larges de marchandisation, d’explosion des volumes et d’instrumentalisation des métriques, à la fois anciennes et renouvelées (Fyfe et al., 2017). La montée des évaluations quantitatives et des modèles Open Access gold crée des incitations susceptibles de fragiliser les garde‑fous. Un facteur systémique majeur qui alimente la demande pour les services de ces éditeurs est la culture oppressante du publish or perish. La prédation n’est donc pas seulement une question de fraude isolée, mais une conséquence des mutations du champ de la communication scientifique depuis la Seconde Guerre mondiale (Boukacem-Zeghmouri et al. , 2022).

Cependant, en janvier 2017, Jeffrey Beall a été contraint de retirer sa liste et d’arrêter son blog à la suite de plaintes de certains éditeurs et documentalistes. Malgré son retrait, la liste originale de Beall reste consultable via des archives et sur des sites comme « Stop Predatory Journals ».  À la suite de cela, la société américaine Cabells Publishing a lancé en juin 2017 une « liste noire » payante, désormais appelée « Predatory Reports ». Cette liste recensait environ 13 000 revues qualifiées de prédatrices au 20 mars 2019, en se basant sur 74 critères pondérés. Elle contiendrait 63% des éditeurs et 94% des revues identifiées dans la liste originale de J. Beall. La croissance de ces revues est alarmante, leur nombre étant passé d’environ 1 800 en 2010 à plus de 19 000 selon les dernières estimations de Cabells [1][2].  

Sur le plan empirique, la répartition géographique et linguistique du phénomène est marquée : les analyses bibliométriques indiquent que les auteurs publiant dans des ces revues proviennent majoritairement d’Asie et d’Afrique (environ deux tiers à trois quarts des articles selon les périodes étudiées), avec des écarts notables entre pays ; par exemple, le ratio « articles dans des revues prédatrices / articles indexés Web of Science » a été signalé comme particulièrement élevé au Nigeria et en Inde (estimations précoces : 1 580 % et 277 %) (Shen & Björk, 2015 ), tandis que des travaux plus récents confirment des différences entre pays et disciplines (Severin et al., 2021 ; Macháček & Srholec, 2022 )

Parallèlement, certaines initiatives « listes vertes » se concentrent sur des aires linguistiques spécifiques : en France, la Conférence des doyens de médecine et le CNU-Santé maintiennent une liste de revues « recommandables » (anglophones et francophones) utilisée pour l’évaluation (SIGAPS). Les conséquences pour les chercheurs sont concrètes : dans plusieurs sections (par exemple en santé, dont la médecine d’urgence), les comités peuvent juger défavorablement les publications ou activités éditoriales menées dans des revues identifiées comme prédatrices, et la conformité aux listes de référence devient un critère d’appréciation. Enfin, au niveau normatif, la révision 2023 du European Code of Conduct for Research Integrity (ALLEA) considère comme une violation de l’intégrité le fait d’établir, soutenir ou utiliser délibérément des revues, éditeurs, événements ou services qui sapent la qualité de la recherche (incluant les revues prédatrices).

2- Typologie de la prédation

Une manière d’appréhender la prédation est de s’intéresser à la typologie des revues et éditeurs touchés. Car la prédation n’est pas un « type » unique de revue, mais un gradient de pratiques qui peut mêler plusieurs facteurs convergents comme la fraude délibérée, la maladresse, la maturité des pratiques éditoriales et l’exposition à des incitations (APC, volume, métriques).

2.1. La prédation par opportunisme

Conséquence de la montée rapide du modèle du libre accès financé par des frais de traitement d’article (APC), des éditeurs ont trouvé une faille dans cette voie pour capter la manne financière disponible. Ces acteurs monnaient la publication d’un article sans fournir l’intégralité des garanties éditoriales, notamment l’évaluation. Ces revues et éditeurs se caractérisent avant tout par une quête de profits, au détriment de l’érudition (Boukacem-Zeghmouri et al. , 2022 ; Demir, 2018). Dans cette logique, leur santé économique dépend de l’efficacité de leurs démarchages et de leurs stratégies marketing. Dans la forme la plus courante, les acteurs se caractérisent par des informations trompeuses ou falsifiées de marqueurs habituels de fiabilité d’une revue. Ils s’efforcent de ressembler aux revues les plus prestigieuses (nom très proche, logo), imitent les sites web, les comités éditoriaux, et les formulaires de soumission des revues de qualité, et font de fausses allégations d’indexation ou de facteurs d’impact (logos Web of Science/Scopus non vérifiables).

Plusieurs indicateurs peuvent alerter les chercheurs sur la nature prédatrice d’une revue. Parmi les plus courants, on trouve les invitations non sollicitées à publier, souvent par courriel non professionnel, la promesse de publication dans des délais très courts, le manque de transparence sur le processus de révision par les pairs, et surtout les frais de publication, souvent modestes (par exemple, inférieurs à 150$). Il est important de noter qu’une revue prédatrice réunit généralement plusieurs de ces critères, mais pas nécessairement tous (de La Blanchardière et al., 2021). Dans tous les cas, leur principale caractéristique est que ces acteurs sont des mutants. Ils disparaissent quand ils sont démasqués, pour réapparaitre avec une nouvelle identité.  

En effet, cette prédation qui consiste à imiter les attributs d’une revue légitime s’inscrit dans une logique économique particulière. On peut éclairer cette logique par la théorie du « marché des citrons» (Akerlof, 1970). Dans ce modèle de l’économiste américain George Akerlof, développé initialement pour analyser le marché automobile de l’occasion, l’existence de produits de mauvaise qualité (indiscernables à première vue des produits de qualité) entraîne une perte de confiance des acheteurs. Cette asymétrie d’information (Akerlof & Spence, 1970) déstabilise le marché dans son ensemble. Les acteurs honnêtes se trouvent mis en difficulté par la présence d’imposteurs qui bénéficient du même vernis de crédibilité.

Appliqué à l’édition scientifique, le mécanisme se traduit ainsi : les revues prédatrices par imitation profitent de la faible capacité des chercheurs, surtout lorsqu’ils sont jeunes ou peu formés aux standards éditoriaux internationaux, à distinguer rapidement un éditeur sérieux d’un éditeur prédateur. Les conséquences de cette asymétrie d’information sont doubles. Pour les chercheurs, d’une part, certains s’y engagent involontairement, pensant publier dans une revue reconnue ; tandis que d’autres, en situation de forte pression à la publication, choisissent délibérément ces voies par pure stratégie. Pour l’écosystème global, d’autre part, la multiplication de ces revues dégrade la confiance générale à l’égard des revues de la périphérie, et peut même jeter le soupçon sur des initiatives émergentes mais légitimes comme celles du Sud global, qui souffrent alors d’une mauvaise réputation non méritée.

De fait, l’effet « lemons » produit ici une externalité négative. En baissant la qualité perçue de l’ensemble du marché, les revues prédatrices tirent vers le bas la valeur symbolique et la visibilité des revues qui ne disposent pas encore de labels de reconnaissance internationale (comme l’indexation dans les bases de données). À long terme, on assiste à un cercle vicieux dans lequel, plus les acteurs frauduleux prospèrent, plus les barrières de confiance se renforcent pour les nouveaux entrants, et plus il devient compliqué pour les revues légitimes de la périphérie de prouver leur crédibilité.

Ici, la notion de prédation rejoint plus largement les critiques des « dérives financiarisées » de la science où les indicateurs de visibilité et de performance tendent à être instrumentalisés au détriment de la rigueur scientifique (Larivière et al., 2015). En ce sens, la prédation par imitation ne constitue pas seulement un problème isolé, mais un facteur de dysfonctionnement structurel du champ éditorial mondial. Elle nous rappelle que la publication scientifique n’est pas un marché autosuffisant, mais un système socio-économique fragile qui repose sur des marqueurs de confiance et de réputation. Lorsque ces marqueurs peuvent être piratés, l’ensemble de la structure est menacé, à moins de compenser par des dispositifs de certification, de labellisation et de pédagogie auprès des auteurs/chercheurs.

2.2. La prédation par immaturité

De nombreuses revues scientifiques, notamment portées par des institutions dans les pays du Sud, évoluent dans un écosystème particulier. Cet écosystème est caractérisé par des contraintes structurelles. En Afrique subsaharienne par exemple, le financement tout d’abord est limité. La plupart des projets éditoriaux reposent largement sur le bénévolat des chercheurs ou des membres de la communauté académique, sans bénéficier d’un soutien national ni sous la forme de plateformes communes, ou de politiques publiques dédiées. Ces acteurs non formés découvrent l’édition sur le tas. Cette non-professionnalisation du métier a souvent une incidence sur la régularité de la parution, qui dépend alors de l’emploi du temps des personnes en charge du travail éditorial ingrat (car souvent non valorisé) (Akakpo, 2009).

Les coûts liés à l’infrastructure éditoriale, tels que l’hébergement web, l’attribution et la gestion des DOI, archivage, matériel technique, représentent un poids proportionnellement plus important pour ces revues que pour leurs homologues dans d’autres contextes. S’y ajoutent des enjeux linguistiques. Les revues sont souvent contraintes de naviguer entre plusieurs langues de communication scientifique, avec des imperfections dans les langues dominantes (comme l’anglais) qui ne sont pas toujours les leurs. Enfin, la formation inégale en matière de pratiques éditoriales et de standards internationaux (éthique de la publication, gestion du peer review, normalisation des métadonnées) constitue un frein important. Pour ne rien arranger, ces facteurs font que ces revues échouent dans leurs tentatives d’indexation par les bases de données du système-monde (Kuchma & Ševkušic, 2024 ; Piron, 2018 ; Azilan, 2024). Le tout est couronné par la facturation quasi systématique en Afrique des frais de publication/d’insertion qui se situent entre 75 et 150 euros, soit dans la marge des sommes demandées par les éditeurs prédateurs. Là encore cependant, il est nécessaire de comprendre que ces frais appliqués par les éditeurs de la périphérie (Afrique, Amérique latine) relèvent davantage d’un modèle d’édition du type communautaire (comme c’est parfois le cas avec les sociétés savantes et les académies éditrices) que d’un modèle commercial.

Les manquements fréquemment observés tels que les sites Internet peu élaborés, métadonnées incomplètes, politiques éditoriales peu détaillées, relèvent dans cet écosystème davantage de l’immaturité éditoriale, des capacités techniques limitées, voire des postures scientifiques imitatives (Kalenga, 1992), que de la mauvaise foi. Dans bien des cas, la faible maturité des revues de cette région (mise en perspective avec les normes globales) est le résultat d’un déficit d’infrastructures (Aldirdiri, 2024), de formation et de soutien institutionnel, et rarement d’un rejet des standards internationaux. La littérature souligne que la prédation se nourrit aussi d’asymétries structurelles et d’inégalités d’accès aux ressources éditoriales (Boukacem-Zeghmouri et al. , 2022).

En conséquence, un grand nombre de ces revues entrent dans les cases théoriques de la prédation. Mais les classer d’emblée « prédatrices » fige des trajectoires et invisibilise les efforts de montée en qualité (Nwagwu, 2016). Mills & Inouye (2020) défendent l’idée que la prédation tend parfois à confondre des pratiques frauduleuses avec l’émergence d’une économie éditoriale alternative propre aux systèmes universitaires en rapide expansion et adoptant précocement le Libre Accès. En effet, le basculement du modèle économique basé sur l’abonnement ou la vente vers des modèles de financement en amont ouvre un espace à de nouveaux intermédiaires éditoriaux, souvent locaux, qui répondent à une demande d’édition et de visibilité insuffisamment satisfaite par les circuits dominants, notamment dans certaines langues, régions ou niches disciplinaires. Si ces acteurs présentent des standards hétérogènes et des dispositifs de peer reviewing perfectibles, ils ne relèvent pas ipso facto de la prédation : ils participent d’une reconfiguration du marché, où les normes, la professionnalisation et les garanties éthiques sont encore en consolidation. D’où la nécessité d’une distinction analytique entre prédation et immaturité organisationnelle, afin de soutenir les dynamiques légitimes d’édition en Libre Accès tout en réprimant fermement les dérives véritablement prédatrices qui cohabitent avec cette immaturité.

Il convient en dernière analyse de préciser que peu de revues africaines francophones subsahariennes sont considérées dans les listes de revues prédatrices, pour la simple raison qu’elles sont pour la plupart invisibles. Si bien que, pour les quelques-unes qui y apparaissent, c’est paradoxalement une forme de visibilité en soi. À cet égard, les travaux de Hesselmann (Hesselmann & Reinhart, 2021 ; Hesselmann et al., 2017) sur les régimes de visibilité/invisibilité dans la science éclairent ce paradoxe. Ils montrent que les « dispositifs de visibilité » (listes, alertes, rétractations) produisent une visibilité surtout punitive, tandis que les conditions structurelles d’invisibilité (faible indexation, métadonnées lacunaires, absence d’infrastructures) demeurent hors-champ. Autrement dit, l’inscription d’une revue jusqu’alors ignorée sur une liste dite prédatrice constitue moins un diagnostic de sa qualité qu’un effet d’étiquetage amplifié par des circuits de réputation asymétriques. Cela rejoint notre cas : l’invisibilité relative des revues africaines coexiste avec des moments de saillance négative qui figent leur image et occultent les trajectoires de professionnalisation.

Une approche graduée permettrait donc à ces revues d’évoluer hors de la zone grise. Dans ce sens, un travail que j’ai entrepris avec des collègues a visé à proposer une évaluation des revues africaines basée sur une échelle de maturité en 5 étoiles (Azilan et al., 2024). S’inspirer de cette grille invite à déplacer le regard : au lieu de prendre la « visibilité par la stigmatisation » pour un indicateur, il s’agit d’évaluer les conditions de production de visibilité (capacités éditoriales, soutiens, standards techniques) et de juger les revues selon leur maturation plutôt que par dichotomie légitime/prédatrice.

2.3. La prédation par avidité

La distinction apparemment simple entre éditeurs « légitimes » et « prédateurs » apparaît beaucoup moins nette qu’on ne le suppose généralement. La frontière qui séparait ces deux catégories tient essentiellement à la logique de rentabilité sur laquelle repose l’édition scientifique depuis l’arrivée des acteurs privés (Guédon, 2017). Dans une économie fondée sur des impératifs de croissance et de profit, le risque de voir certaines pratiques éditoriales basculer vers des formes de prédation est prégnant. L’émergence de nouveaux modèles économiques (libre accès payant via l’APC, accords transformants, abonnements groupés) illustre la recherche constante de nouvelles rentes par les acteurs dominants. Mais, sous la pression de la croissance et du rendement, les dispositifs éditoriaux eux-mêmes deviennent des espaces de fragilité.

Dans cette perspective, on peut parler d’Open Science washing, c’est-à-dire l’appropriation du vocabulaire et des instruments de la science ouverte (APC « vertueux », accords transformants, dépôts partiels en archives ouvertes, tableaux de bord d’“ouverture”) sans en respecter les principes effectifs d’accessibilité, de transparence, de réutilisabilité et de gouvernance. La rhétorique d’ouverture sert alors d’habillage réputationnel à des modèles qui perpétuent des rentes. Sous la pression du rendement, des promesses performatives peuvent masquer des pratiques moins conformes à l’esprit de la science ouverte et fragiliser la confiance.

Ainsi, il importe de souligner que même des éditeurs réputés, parmi les plus visibles et dominants de la scène internationale, peuvent tomber dans des pratiques discutables. Ces écarts ne traduisent pas toujours une stratégie de prédation, mais peuvent résulter de dispositifs organisationnels précis, tels que les numéros spéciaux pilotés par des éditeurs invités (special issues), où les mécanismes de sélection et de contrôle éditorial ne sont pas les plus rigoureux. Prenons le cas des numéros spéciaux par exemple ; bien qu’ils visent à dynamiser ou à thématiser la visibilité d’une revue, ils constituent des points d’entrée privilégiés pour des dérives telles que l’abaissement du seuil de qualité, la complaisance dans la sélection ou la délégation excessive du contrôle scientifique (Gleasner & Sood, 2024).

La littérature récente met d’ailleurs en lumière des failles systématiques dans certains segments de l’édition académique. On relève notamment des cas de manipulation de l’évaluation par les pairs, de recours à des « paper mills » (Parker et al., 2024 ; Candal-Pedreira et al., 2022), de comportements anormaux en matière de citations (auto-citations massives, réseaux ou cartels de citations) (Fister Jr. et al. ; Perez et al.). Ces dérives affectent aujourd’hui autant les écosystèmes périphériques que ceux dominants. Cette porosité de la frontière entre légitime et prédateur complexifie désormais l’usage de catégories binaires. Elle invite à repenser la notion même de la prédation, non plus comme une étiquette figée appliquée à quelques éditeurs ou revues, mais comme une zone de vulnérabilité pouvant toucher, selon les contextes et les pressions économiques, l’ensemble des acteurs de l’édition scientifique mondiale.

On peut mobiliser, pour éclairer ce phénomène, la perspective des systèmes sociotechniques. La publication scientifique n’existe pas indépendamment d’un écosystème de métriques, de plateformes, d’évaluations institutionnelles et de régulations internationales qui prescrivent les formes légitimes de valorisation. Dans cet écosystème, l’équilibre entre valeur scientifique et valeur marchande est toujours précaire. Si l’innovation éditoriale ou l’ouverture de nouveaux canaux de diffusion peuvent accroître la circulation des savoirs, elles peuvent tout aussi bien alimenter des logiques extractives.

3- Du prestige à la prédation. Comment les grands éditeurs se font avoir ?

La catégorie la plus nuancée de prédation se situe dans ce qui est souvent appelé la « zone grise » de l’édition scientifique. Des éditeurs comme MDPI, Frontiers et Hindawi, pour ne citer que les figures plus discutées dans la littérature, constituent des exemples de cette ambivalence. Ils présentent, a priori, à la fois des caractéristiques d’éditeurs fiables et des pratiques proches de la prédation.

Si l’affaire Hindawi/Wiley (Petrou, 2025) entre 2022 et 2024 constitue un point d’inflexion en raison de l’ampleur des rétractations et de la perte de crédibilité d’une marque entière, elle ne doit pas être interprétée comme un cas isolé. Au contraire, c’est une manifestation d’une faille structurelle qui concerne l’ensemble des éditeurs qui ont recours massivement aux numéros spéciaux comme axe de croissance et d’attraction d’auteurs. Ces special issues sont devenus pour nombre d’éditeurs des points de vulnérabilité exploités pour produire des revenus éditoriaux. D’un point de vue théorique, on peut parler d’une capture d’un dispositif sociotechnique (Akrich, 1993) : un outil pensé pour enrichir la communication scientifique est détourné et reconfiguré par des acteurs opportunistes pour maximiser leurs gains symboliques et financiers.

Un indicateur clé de cette dérive a été l’accélération des délais d’acceptation pour les articles des numéros spéciaux par rapport aux articles réguliers. Chez Hindawi/Wiley, en 2022, les articles des numéros spéciaux étaient acceptés en 67 jours, soit 56 jours plus rapidement que les 123 jours des articles réguliers, avec des écarts encore plus importants pour des revues comme BioMed Research International et Wireless Communications and Mobile Computing. Les conséquences de ces pratiques ont conduit à la désindexation de plusieurs revues Hindawi du Web of Science (WoS). Cela a même impacté la valeur boursière de Wiley, qui avait acquis Hindawi en 2021 pour la modique somme de 298 millions de dollars (Petrou, 2025).

L’affaire Hindawi/Wiley montre comment un éditeur de renom peut être fragilisé par ses propres logiques organisationnelles de croissance. Fondé en Égypte, Hindawi est devenu, dans les années 2010-2020, l’un des plus grands éditeurs scientifiques basés en Afrique (plus de 250 revues en 2022), avant que Wiley ne mette fin à la marque en 2023-2024 à la suite de ces scandales d’intégrité. Le danger ne réside donc pas uniquement dans la marge du champ scientifique, mais au cœur même de ses principaux flux éditoriaux.

Deux autres cas l’illustrent particulièrement bien : MDPI et Frontiers.

  • Le cas MDPI

MDPI (Multidisciplinary Digital Publishing Institute) est un autre cas emblématique de cette zone grise. L’éditeur est connu pour l’explosion du nombre d’articles et de numéros spéciaux, avec une croissance exponentielle de publications. En France, le total cumulé d’articles publiés par MDPI est passé de 4 609 en 2018 à 26 130 en 2022, soit une augmentation… de 466% (Fovet-Rabot, 2022). La rapidité de publication est une caractéristique distinctive de MDPI, avec un délai médian entre la soumission et la publication de seulement 38 jours en 2021 (Ibid.).

Cet éditeur basé en Suisse s’est fortement développé grâce à ce modèle qui mise également sur l’ouverture massive de special issues. Dans certaines disciplines comme les sciences de l’ingénieur ou les sciences de l’environnement, les special issues représentent aujourd’hui la majorité des volumes publiés. Cette stratégie hyper‑volumétrique, combinée à des délais de traitement extrêmement rapides, suscite encore aujourd’hui de nombreuses critiques dans la communauté académique.

Si le processus éditorial chez MDPI est formellement mieux encadré que dans le cas Hindawi, plusieurs signaux faibles ont été relevés : surproduction thématique, avec des numéros parfois hétéroclites, lancés sans lien évident avec la revue mère, dépendance excessive à des éditeurs invités, peu expérimentés en gestion éditoriale ; volume d’articles incompatible avec une évaluation de qualité. Les comités éditoriaux et de relecteurs de MDPI sont souvent pléthoriques, comptant des centaines de membres. Ses revues affichent également des taux élevés d’autocitation (environ 30%, parfois plus de 50%), une pratique d’accroissement artificiellement de leur facteur d’impact (Oviedo-García, 2021). Les frais de publication (APC) ont considérablement augmenté, passant de 0-1700 CHF (1800€) en 2017 à 1200-2500 CHF (environ 1300 et 2600€) début 2022. L’éditeur a même offert des réductions pour les articles liés au COVID-19 (Fovet-Rabot, 2022).

  • Le cas Frontiers

L’éditeur Frontiers, par ailleurs pionnier sur certains aspects de l’édition en libre accès, a également été critiqué pour un peer reviewing trop souples liés à son système de Research Topics (équivalents des special issues). Ici encore, le volume apparait comme une variable clé. Des cas concrets d’usurpation d’identité de relecteurs ou d’éditeurs ont également été rapportés. Par exemple, une adresse électronique non authentique a été utilisée pour usurper l’identité d’un scientifique et l’associer à plusieurs articles en tant qu’éditeur ou relecteur. Cela a mené à la rétractation d’un article et à la correction de quatre autres : il s’agit d’un exemple d’un processus de révision par les pairs compromis.

Les cas Hindawi/Wiley, MDPI et Frontiers montrent que la question ne se situe pas uniquement dans les marges ou auprès d’éditeurs peu scrupuleux, mais qu’elle concerne des maisons d’édition reconnues, indexées dans les bases académiques centrales (Scopus, Web of Science, DOAJ).

Ce qui est principalement en jeu chez ces éditeurs, c’est l’industrialisation du modèle des special issues. Cela pose une question théorique plus large : les special issues fonctionnent comme un dispositif socioéconomique biface. D’un côté, ils ouvrent des espaces académiques pour des communautés nouvelles, interdisciplinaires ou périphériques. De l’autre, lorsqu’ils deviennent une stratégie de volume, ils créent une faille exploitée par des acteurs commerciaux et fragilisent les mécanismes de validation scientifique. Dans le cas des 3 éditeurs, la prédation n’est pas un état ontologique, mais l’émergence de pratiques à risque sous contraintes d’incitation liées à la croissance, à la réputation, et aux métriques.

Le principal reproche qui peut être adressé à ces acteurs est d’embrasser une production inflationniste qui dépasse les capacités raisonnables d’une évaluation rigoureuse, alors même que l’édition scientifique globale est désormais secouée par une crise de l’évaluation (Gingras, 2023 ; Flaherty, 2022 ; Nottale, 2005). On produit trop pour trop peu de personnes disponibles pour lire et évaluer. Or, la production scientifique chez d’autres éditeurs concurrents augmente également sans que ceux-ci ne soient à ce jour considérés comme prédateurs. Hanson et al. (2024) ont montré que si la stratégie de croissance des éditeurs précités (Hindawi, MDPI et Frontiers) est basée sur la publication des numéros spéciaux et du nombre d’articles par numéro, on peut observer une autre forme de croissance chez d’autres éditeurs, basée sur la publication de nouvelles revues. Ainsi, les auteurs ont montré que les éditeurs comme Elsevier et Springer ont également augmenté leur publication totale d’articles. Elsevier a enregistré une augmentation d’articles de 41% entre 2016 et 2022, et de 52% chez Springer sur la même période.  En complément, ils ont adopté une stratégie subtile de distribution de ces articles sur un nombre croissant de revues. Finalement, dans un cas ou dans l’autre, il s’agit des modèles de croissance qui renvoient au même problème : la surproduction comme stratégie de croissance économique.

Au-delà des suspicions, Guillaume Cabanac a mis en œuvre d’une méthode de détection des traces textuelles pouvant indiquer l’existence de pratiques frauduleuses, appelées « expressions torturées » (Cabanac, 2023 ; Cabanac & Labbé, 2022). Celles-ci ont été trouvées dans les catalogues de ces grandes maisons d’édition. Les expressions torturées sont des assemblages de mots incongrus et dénués de sens, conséquences de l’utilisation de logiciels de paraphrasage afin de contourner les détecteurs de plagiat. Des exemples concrets selon Cabanac sont « corrosif nucléique » pour « acide nucléique », « conscience contrefaite » pour « intelligence artificielle », ou encore « déception rénale » pour « insuffisance rénale ».

L’augmentation constante de ces expressions torturées (416 cas en 2018, 638 en 2019, 1 135 en 2020 et plus de 1 500 en 2021) indique un problème qui contourne les mécanismes de contrôle qualité traditionnels dont aiment se prévaloir les éditeurs de l’oligopole. On désigne par là le petit groupe d’acteurs dominants de l’édition scientifique internationale (souvent cités : Elsevier, Springer Nature, Wiley, Taylor & Francis, Sage) qui concentrent une part majeure des titres, des citations et des revenus du secteur (Larivière et al., 2015v). Ceux-ci deviennent malgré eux des vecteurs de recherche frauduleuse. La reconnaissance de ce problème est telle que des éditeurs comme ACM, Elsevier, IEEE, l’Institute of Physics et SAGE ont contacté l’équipe de Cabanac pour désormais utiliser leur outil (Problematic Paper Screener) dans leur processus prépublication, signe que les méthodes classiques d’évaluation sont elles aussi dysfonctionnelles. Problematic Paper Screener analyse quotidiennement des millions de publications indexées dans Dimensions pour détecter ces anomalies. Une approche participative permet d’identifier de nouvelles expressions torturées, qui sont ensuite ajoutées au logiciel. Les articles signalés sont rapportés sur la plateforme PubPeer.org pour une réévaluation post-publication et, potentiellement, une rétractation. Cela étant, il convient de penser à d’autres formes d’évaluation plus ouvertes, comme ces évaluations post-publication qui peuvent être les derniers remparts pour limiter la pollution scientifique.

Graphique montrant les éditeurs touchés par les expressions torturées (en nombre d'articles): IEEE (6653 articles) devance dans l'ordre Springer, Elsevier, Taylor & Francis et Wiley (878 articles)

Figure 1 : Les 5 plus grands éditeurs scientifiques, qui concentrent à eux seuls la moitié de la production scientifique mondiale indexée (oligopole), sont touchés par les expressions torturées. Source de la donnée : Problematic Paper Screener.

Sans négliger d’autres paramètres qui font la différence entre ces deux groupes (notamment les taux de rejets, le délai de traitement, l’inflation du facteur d’impact), il convient de noter que la maximisation des gains est au cœur des deux stratégies. En cela, on peut bien admettre que les éditeurs commerciaux jouent avec la ligne rouge, cherchant constamment l’équilibre entre rentabilité et évaluation, avec la nuance fondamentale que certains sont à la fois juge et partie. Et s’il faut désormais considérer que la prédation est un fléau global, qui est donc légitime pour dénoncer et sanctionner les coupables ?

4- Qui pour signaler la prédation ?

La question de la légitimité à qualifier une revue de “prédatrice” reste indéterminée. Le signalement des revues prédatrices implique une diversité d’acteurs et soulève des interrogations sur les conflits d’intérêts potentiels.

D’abord, il y a des acteurs qu’on peut considérer comme « historique ». La liste de Beall a joué un rôle d’alerte, mais sa méthodologie a été sujette à de vives critiques. Stop Predatory Practice, Predatory Journals, Retraction Watch, PubPeer, Problematic Paper Screener  sont entre autres aujourd’hui des initiatives plus « communautaires » pour servir de garde-fou. A côté de ces initiatives, cohabitent d’autres de type privé. Cabells Publishing évoqué plus tôt propose ses « Predatory Reports » , dont l’accès est payant.

Parallèlement, des « listes blanches » comme le Directory of Open Access Journals (DOAJ) et l’adhésion à des organisations professionnelles telles que le Committee on Publication Ethics (COPE) et l’Open Access Scholarly Publishers Association (OASPA) sont utilisées pour identifier les revues fiables. Cependant, elles ne sont jamais exhaustives ni totalement à jour, et peuvent être sources de divergences. Des études ont établi que les revues prédatrices peuvent infiltrer des listes blanches, autant que des revues sérieuses peuvent être taxées à tort de prédatrices. Le COPE lui-même met en garde contre la confiance aveugle dans ces listes, surtout si les critères d’évaluation ne sont pas transparents (Manca et al., 2018 ; Pond et al., 2019).  

En 2013, John Bohannon a mené une enquête dans ce sens (Bohannon, 2013). Il a soumis 304 faux articles scientifiques générés par des algorithmes sous Python à des revues en libre accès, dont beaucoup figuraient dans la liste de Beall, complétée avec d’autres revues du DOAJ. Si la majorité des revues prédatrices acceptent la publication, Bohannon observe que 18% d’entre elles ont rejeté l’article. D’abord, certaines revues appartenant à des éditeurs prestigieux, dont Elsevier et Sage, figurent parmi celles qui ont accepté l’article. 45 % des éditeurs du DOAJ qui ont terminé le processus d’examen ont également accepté. L’auteur a pu conclure qu’une revue sur 5 dans la liste de Beall est accusée à tort (lire aussi Davis, 2013).

Face à ce constat, des outils d’évaluation multicritères fondés sur la pédagogie ont été développés pour aider les chercheurs à évaluer eux-mêmes la fiabilité d’une revue. Des initiatives comme Think.Check.Submit (Pearson, 2017 ; Cortegiani & Shafer, 2018) et Compass to Publish (Dony, 2025) proposent des listes de vérification et des questionnaires pour guider les auteurs dans leur choix.

–          Le rôle ambigu des bases de données

Les bases de données bibliographiques comme Scopus (Elsevier) et Web of Science (Clarivate) sont largement considérées comme les sources les plus fiables de données bibliographiques pour l’analyse et l’évaluation de la recherche. Elles appliquent des critères de sélection rigoureux (voire discriminatoires) pour l’inclusion des revues. Ces critères dont on ne connait pas les détails précisément, reposent globalement sur la révision par les pairs, la transparence des politiques éthiques, la régularité de publication, la contribution académique, et la diversité géographique des éditeurs et des auteurs.

De même, ces bases de données jouent un rôle actif dans le signalement et la désindexation des revues qui ne respectent plus standards de qualité et leurs directives éthiques qu’elles ont fixés. Scopus, par exemple, utilise un « système Radar » pour détecter les violations et désindexe régulièrement les revues qui présentent une qualité éditoriale douteuse, comme cela a été le cas avec Hindawi.

Cependant, le rôle de ces bases de données n’est pas sans ambiguïté ; non seulement parce que l’indexation n’est pas une garantie absolue de qualité, mais surtout, un problème structurel réside dans le fait qu’Elsevier (propriétaire de Scopus) et Clarivate (propriétaire du Web of Science) sont également des acteurs majeurs de l’édition scientifique. Cette double casquette, où des entités commerciales évaluent et indexent des publications, y compris potentiellement les leurs ou celles de leurs concurrents, peut susciter des questions de conflits d’intérêts. Cette concentration de pouvoir où les mêmes acteurs définissent les standards de qualité et profitent à la fois de la publication et de l’évaluation, représente un risque pour l’objectivité et l’indépendance de l’évaluation. Il est possible que leurs intérêts commerciaux influence, même subtilement, les critères ou l’application des règles.

Il se pose donc un autre problème dans l’écosystème si les bases de données désindexent les concurrents taxés comme douteux alors que ces plateformes appartiennent à des éditeurs qui publient eux-mêmes des articles de qualité inquiétante, comme c’est le avec les expressions torturées.

Conclusion

La prédation scientifique n’est pas un problème isolé, mais le symptôme d’un système scientifique fragilisé par l’urgence de publier et la financiarisation croissante des savoirs. Les outils traditionnels de distinction et d’autorité ne résistent pas à eux-seuls, difficile de faire face à un phénomène qui change en permanence de visage, un objet mouvant. Mais l’enjeu principal n’est pas l’obsolescence de ces outils, mais leur mise en œuvre cohérente par des politiques publiques qui alignent les incitations, financent les capacités et assurent l’exécution. La lutte exige donc une mobilisation collective : des chercheurs formés assurément (comme le font les Urfist en France), mais aussi des institutions et financeurs pour repenser l’évaluation. Réaffirmer que la publication scientifique est un bien commun mondial est la condition pour restaurer un équilibre durable entre intégrité et production.

Quelques axes méritent à mes yeux d’être explorés pour prolonger l’analyse et envisager des solutions durables face à ces vulnérabilités. Un premier champ réside dans l’observation des dynamiques régionales. L’exemple des revues locales en Afrique, en Amérique latine ou en Asie du Sud invite à examiner les mécanismes alternatifs de légitimation qu’elles mettent en œuvre, souvent en dehors des grands circuits commerciaux et bibliométriques dominants. Comprendre ces trajectoires permettrait non seulement de réduire le flou autour de la notion de prédation, mais aussi de valoriser des pratiques éditoriales ancrées dans des contextes scientifiques et culturels spécifiques.

Un second axe consisterait à expérimenter des modèles de gouvernance partagée. L’implication conjointe des chercheurs, des éditeurs, des bibliothèques et des financeurs pourrait offrir un cadre collectif pour encadrer certains dispositifs à risque (notamment les special issues) et mettre en place des barrières contre la dérive volumétrique qui les fragilise. Ces approches collaboratives constitueraient une étape décisive vers une responsabilisation des différents acteurs de l’écosystème scientifique.

PS : Je voudrais remercier Aline Bouchard (URFIST de Paris) et Tristan Salord (IRIT) pour la lecture et les commentaires de ce texte.

 

Repérer et Analyser les articles Scientifiques Problématiques (RASP) : une résidence toulousaine

vue sur la loupe des outils de détection de méconduite scientifique : Prolematic paper screener, tortured phrases, AI contentCe projet scientifique et pédagogique, financé par le Fonds national pour la science ouverte, est porté par l’Université de Toulouse au sein du laboratoire IRIT en partenariat avec l’URFIST Occitanie.  

Ce projet de 18 mois (juin 2025-décembre 2026) vise à mieux saisir à la fois quantitativement et qualitativement l’ampleur de ces nouvelles formes de déviances de la production scientifique que ce soit à l’échelle :
– de leurs productions (articles générés automatiquement par IA ou par des algorithmes de grammaires probabilistes, falsification ou arrangements plus ou moins problématiques des données, cartels de citations),
– de leur “marché” (“paper mills”, marché de la citation, “hijacking” de revues, …).

Il bénéficie pour cela des travaux réalisés par Guillaume Cabanac, professeur des Universités à l’Université de Toulouse, et des communautés de chercheurs œuvrant sur ces questions aux niveaux national et international. En parallèle, il bénéficie du travail de recherche de Guillaume Sire, maitre de conférences HDR de l’Université Toulouse Capitole, pour aller interroger les motivations de la production de ces articles scientifiques problématiques. 

Cette résidence est l’occasion de diffuser auprès d’un large public à la fois les outils permettant d’identifier ces méconduites et pratiques frauduleuses, comme le Problematic Paper Screener, accompagnés d’éléments de compréhension de ces pratiques. Un des objectifs de ce post-doctorat est également de concevoir et animer des formations de sensibilisation à ces questions et leurs enjeux via les catalogues de formation du Réseau URFIST.

Pour mener à bien ce projet, Tristan Salord a été recruté : Sociologue et économiste de formation, spécialisé en scientométrie et sciences sociales computationnelles, il a intégré les deux équipes début juin et déjà animé un atelier de formation le 26 juin à l’occasion du séminaire national des URFIST à Toulouse. Ce moment riche aussi bien en partages d’expériences qu’en discussion sur les problématiques contemporaines de la production scientifique, laisse présager une collaboration dynamique et fructueuse. Retour en image sur l’atelier

“Wikifier la science” : témoignages par ceux et celles qui le font déjà

Au cours des deux années du projet Wikifier la science, les wikimédiens et wikimédiennes en résidence ont donné la parole une fois par mois à ceux et celles qui ont engagé une démarche sur la science ouverte et les projets Wikimédia. Entretien, présentation de travaux, découverte d’outils et de techniques… Au fil de ces 17 “wikicafés”, se dessine un panorama de toute la richesse des possibilités dans l’enseignement supérieur et la recherche.

Continuer la lecture

Une Semaine Numérique

La Semaine Numérique des URFIST 2025 s’est déroulée du 17 au 21 mars, offrant une série de formations et d’ateliers en ligne dédiés aux outils et méthodes en science ouverte. Cet événement a rassemblé 356 participants et totalisé 24 heures de visioconférences, témoignant de son succès. Entre outils innovants, réflexions critiques et partage d’expériences, la Semaine Numérique des Urfist a reflété le dynamisme du réseau des Urfist dans la formation et la diffusion des savoirs.

Les stages

Le programme a couvert un large éventail de thématiques:

  • Animée par Alain Godon et Damien Hamard, une session a exploré des territoires nouveaux entre recherche documentaire et Open Source Intelligence (OSINT)
  • Des outils tels que Stylo, présenté par Roch Delannay, et Obsidian, par Raphaëlle Bats, permettent de simplifier la rédaction et l’organisation des notes de recherche en Markdown.
  • Le libre et les communs numériques ont été cultivés, dans la droite ligne des résidences wikimédia de nos unités et grâce aux résidents (Delphine Montagne, Mickaël Schauli, Pierre-Yves Baudouin) : les participants ont découvert OpenStreetMap, Wikipédia bien sûr, Mastodon, et le langage de requête SPARQL
  • Nous avons eu la chance d’écouter Ian Johnson, développeur principal depuis 20 ans d’Heurist, plateforme de gestion de bases de données pour les sciences humaines et sociales
  • Côté publication : outre la présentation de la première revue francophone consacrée aux datas papers en SHS, Data&Corpus, par Florence Thiault et Julien Müller, Les Presses Universitaires de Rennes, avec Yves Picard, ont abordé leur initiative visant à aligner au mieux leurs contrats d’auteurs sur les principes de la science ouverte
  • Lucile Bourguignon a présenté Lodex, un outil Inist-CNRS destiné à la valorisation de données structurées pour des analyses bibliométriques.

Le temps fort : Séminaire « Jeunes chercheurs »

Le séminaire dédié aux jeunes chercheurs a mis en lumière la diversité des manières d’investiguer la fabrique et la diffusion de la science aujourd’hui :

  • Marianne Duquenne a témoigné d’une approche communicationnelle de la science ouverte, analysant les dynamiques de collaboration et les intérêts des parties prenantes dans la production et la diffusion des connaissances.
  • Innocent Azilan : son étude sur l’« épistémicide » en Afrique francophone, explore la disparition de savoirs locaux face aux paradigmes scientifiques dominants.
  • Ugo Verdi analyse quant à lui les littératies et la gouvernance des données, soulignant l’importance des compétences en gestion des données
  • Clara Galliano enquête sur les pratiques singulières de la science ouverte chez les enseignants-chercheurs : non, l’enseignant-chercheur n’est pas qu’une donnée !
  • Nicolas Brard étudie l’engagement des chercheurs sur les réseaux socio-numériques, analysant les opportunités et les défis associés à la médiation scientifique en ligne
  • Marcin Trzmielewski réfléchit à l’organisation des connaissances médicales sous l’angle de l’utilité, proposant une approche contextualisée pour l’élaboration de systèmes d’organisation des connaissances en allergologie.
  • Amélie Daloz nous a présenté ses travaux sur l’intelligence artificielle et la veille environnementale, explorant comment l’IA peut être utilisée pour surveiller et analyser les données environnementales.
  • Irene De Togni analyse les effets participatifs sur les plateformes de critique culturelle.

Ce séminaire a démontré le dynamisme, l’inventivité et la richesse de la jeune recherche dans le domaine des sciences de l’information et de l’information scientifique.
Rendez-vous l’année prochaine pour de nouvelles explorations numériques !

La JNE 2014 “Nouvelles formes de communication et d’évaluation scientifiques” en distanciel sur Jalon

L’Urfist de Nice met en ligne en version bêta un distanciel interactif (un “sooc”[1]) basé sur les interventions de la Journée Nationale d’Étude Urfist 2014: “Nouvelles formes de communication et d’évaluation scientifiques : perspectives et légitimités”. Sous la supervision de Gabriel Gallezot et de Michel Roland, il a été réalisé par Florence Garelli[2] via Jalon, la plateforme pédagogique de l’UNS, et Zaption. Les clips ont été équipés de questions, et de sous-titres en français lorsque l’intervention était en anglais. Concrètement, le visionnage des clips vidéo est interrompu par des questions (vrai/faux, choix multiple ou question ouverte) portant sur l’intervention ou sur le support fourni par l’intervenant, et le “stagiaire” doit répondre à la question pour continuer son visionnage. La formation est accessible sur téléphone mobile via un navigateur ou l’application Zaption.

> Lien vers la formation ouverte

Il s’agit pour nous d’expérimenter la réalisation d’un outil d’auto-apprentissage actif à partir de communications comme celles de la journée d’étude. La formation est en version bêta, c’est-à-dire que toutes les fonctionnalités ne sont pas implantées. Pour l’instant l’accès aux exercices est libre et non évalué. Il est possible cependant d’obtenir une attestation de suivi de stage qui sera délivrée après vérification que l’ensemble du parcours avec ses douze activités a été réellement réalisé. Il y a sans doute des erreurs et des approximations dans les sous-titres ou dans la formulation des exercices, voir des bugs. C’est pourquoi nous sommes très demandeurs de remarques critiques et d’appréciations, de détail aussi bien que sur l’ensemble du projet[3] .

FG 150331

  1. small online open course
  2. Urfist de Nice et Service des Pédagogies Innovantes de l’Université de Nice Sophia-Antipolis
  3. en commentaire ici, par courriel à urfist@unice.fr ou via le questionnaire en fin de formation.

Interventions et supports de la JNE 2014: “Nouvelles formes de communication et d’évaluation scientifiques”

Les vidéos et les supports de la Journée d’Étude “Nouvelles formes de communication et d’évaluation scientifiques : perspectives et légitimités” sont consultables sur le wiki de l’Urfist de Nice : LIEN.

La 5ème Journée Nationale d’Étude du réseau des URFIST s’est tenue le 25 septembre 2014 à l’Université de Nice Sophia-Antipolis. Elle s’est focalisée sur les différentes formes de publication de la recherche et sur les modes de légitimation ou d’évaluation associés.

Continuer la lecture

Scientometrics : école d’été européenne, Berlin, septembre 2013

ESSS-13, European Summer School for Scientometrics, Humboldt Universität, Berlin, 8-13 septembre 2013

La densité des informations accumulées sur cinq jours et demi oblige le participant à prendre un sérieux recul pour dégager un noyau dur autour duquel gravitent les contenus des conférences et des ateliers.

 

Les « satellites » sont nombreux : un grand nombre de détails techniques, classiques certes mais amplement développés, sur – par exemple – les méthodes de nettoyage des données et la mise au jour de réseaux issus du co-autorat et des co-citations. Autrement dit, sur la bibliométrie traitée en tant que domaine technique, tel que nous le connaissons.

 

Ce sont toujours les membres de ce que nous appelions, après l’édition ESSS 2011 à Vienne : l’école flamande – qui interviennent, sans grande surprise, malgré un degré d’expertise qui ne laisse pas de surprendre. Leyde et Louvain (Leiden et Leuven) sont les foyers incontestés de la recherche dans le domaine, avec l’incontournable Wolfgang Glänzel, entouré de Ton Van Raan, Bart Thijs, Koenraad Debackere et Henk Moed.

 

De même, c’est toujours, immanquablement, le Web of Science qui sert d’ « étalon » dans la conception des modèles alternatifs. Son analyse critique permet de naviguer dans les systèmes novateurs fondés sur des principes déjà bien rodés comme l’Eigenfactor et l’heuristique de la diversité. Scopus est évoqué à propos du SJR (SCImago Journal Rank, clone de l’Eigenfactor) et surtout du SNIP (Source Normalized Impact per Paper : une façon comme une autre de rappeler que les chercheurs de Leiden travaillent aussi bien pour le compte de Thomson que pour celui d’Elsevier) mais Scopus est resté ces jours-là relativement marginalisé dans les exposés et les échanges, même si nul n’en conteste les points positifs.

 

Les travaux pratiques (statistiques, conception d’ensembles et cartographie) effectués lors des ateliers, se sont focalisés sur les données du Web of Science et non sur celles de Scopus, moins encore de Scholar Google. Le manque de temps (les T.P. étaient menés sur une journée et demi à une cadence passablement effrénée) n’était peut-être pas le seul motif de cette concentration, même si le SNIP, le SJR et l’OA constituent des facteurs non négligeables « hors Thomson ».

 

 

Néanmoins, la présentation qui a permis de nuancer le débat reste (de notre point de vue) celle d’Erik Arnold, du groupe Technopolis. L’activité de cette société consiste à faire du benchmarking en matière de gouvernance, orienté vers la recherche et l’innovation, à la demande des États, européens en particulier. Exposée en milieu de colloque, cette présentation fait un peu figure de centre de gravité dans l’ensemble des communications. Arnold rappelle que la bibliométrie est trop souvent perçue par les institutions comme un outil destiné à mesurer et à « modéliser » l’excellence d’un organisme ou d’une équipe à courte échelle. Autrement dit, il met en garde contre le repli sur soi d’un groupe à granularité petite ou moyenne, sans que la plus vaste échelle, aux niveaux national et surtout international, soient envisagée prioritairement. Au-delà des performances d’un laboratoire ou d’une institution, l’internationalisation des travaux de recherche s’impose, de même que le lien avec avec l’industrie (R&D, notamment des start-up innovantes).

 

Dans cette perspective (celle de l’ « impact sociétal » qui permet d’inclure les SHS pour une bonne part) la bibliométrie devrait être plus ouverte sur l’interdisciplinarité et faire abstraction de facteurs anciens et réducteurs. Elle apparaît sous cet angle comme une composante, utile certes mais dont l’importance est certainement relativisée, de stratégies de recherche et d’innovation intelligentes, adaptées à la mondialisation. Arnold reproche entre autres à certaines administrations chargées de l’ESR, de négliger cette ouverture pragmatique en direction d’infrastructures étrangères à la sphère « proprement » académique et de limiter leurs mesures à une excellence en quelque sorte introvertie.

 

 

Ce colloque, (dont les abstracts et les présentations sont d’ores et déjà pour la plupart disponibles), faisait immédiatement suite à une autre manifestation, également tenue à Berlin : la 18ème Conférence internationale sur les Indicateurs en Science et Technologie. Son titre rappelle d’ailleurs les propos d’Arnold : Translational twists and turns : science as a socio-economic endeavor. Elle associait l’IFQ (Institute for Research Information and Quality Assurance) à l’ENID (European Network of Indicators Designers).

 

 

N.B.: La présentation d’Erik Arnold est improprement datée du 10 septembre 2012 au lieu de 2013.

 

Journée d’études “Bibliométrie et indicateurs de la recherche : enjeux et perspectives”

11 juin 2013, 9h-13h
Amphi Cujas (Université Toulouse 1 Capitole – Anciennes Facultés)

Cette journée est gratuite, ouverte à tous, mais l’inscription est obligatoire pour des raisons logistiques : http://www.urfist.cict.fr/sygefor/journee

  • Présentation

L’objectif de cette journée est d’impulser une réflexion pluridisciplinaire sur les mesures de la science au niveau du site toulousain de la recherche et de ses acteurs. Alors qu’ils n’y étaient pas initialement destinés, les travaux de bibliométrie ont parfois dévié vers l’évaluation quantitative des chercheurs et des institutions. Les décideurs et les chercheurs eux-mêmes se sont progressivement emparés des différents indicateurs. Au gré des exigences institutionnelles ou de divers impératifs professionnels, ils en sont venus à réaliser leurs propres mesures, avec des dérives qui ont maintes fois été dénoncées.

Dans l’objectif de mieux comprendre le fonctionnement de l’activité de recherche, plusieurs questions se posent alors. Est-il quand même possible et souhaitable de mobiliser ici les outils bibliométriques ? À quelles conditions et quelles sont les précautions prendre ? C’est à ces questions que cette journée, qui devrait être suivie par d’autres, tentera d’apporter des éléments de réponse en s’appuyant sur des travaux en sociologie, en sciences de l’information et de la communication et en informatique.

  • Programme

9h-9h30. Introduction
Pierre Aimar (PRES Université de Toulouse)

9h30-10h15.   La science et ses miroirs : la bibliométrie en perspective
Michel Zitt (INRA)

10h15-10h45.   Bibliométrie et production des connaissances : quelle évaluation de la recherche ?
Muriel Lefebvre (URFIST/LERASS)

10h45-11h. Pause

11h-11h30.  Évaluation de la recherche en Italie : (més)usages de la bibliométrie et l’initiative ROARS
Alberto Baccini (Université de Sienne, Italie)

11h30-12h.  Perception de la recherche via les médias sociaux : le prisme des Altmetrics
Guillaume Cabanac et Gilles Hubert (IRIT)

12h12h30.  Pour une démesure de la science : faire de la bibliométrie sans compter
Béatrice Milard (LISST)

12h30-12h45.  Conclusion et perspectives à venir
Michel Grossetti (LISST/LabEx SMS)

  • Organisation

Cette journée est organisée par Béatrice Milard (LISST), Guillaume Cabanac et Gilles Hubert (IRIT) et Muriel Lefebvre (LERASS/URFIST), avec le soutien de l’IRIT, de l’URFIST, du LabEx SMS, du LISST, du programme ANR Résocit, du LERASS et de l’UT1.

  • Contact

muriel.lefebvre@ut-capitole.fr

 

Informatique et scientométrie

La spécificité de la littérature scientifique dans le domaine de l’Informatique réside dans le type de support qui la sous-tend, c’est-à-dire principalement les proceedings. Les particularités propres aux communications touchent aussi bien le champ des pratiques ou de la culture informationnelles que celui de la cartographie scientométrique.

Le premier de ces deux domaines a été décrit de façon détaillée dans un article d’Andrea Kienle et Martin Wessner (université de Dortmund et fondation Fraunhofer à Darmstadt) intitulé Principles for Cultivating Scientific Communities of Practice. Ils analysent une communauté en particulier, la CSCL (Computer-Supported Collaborative Learning) sur la décennie 1995-2005. Ils passent au crible les listes de participants et d’intervenants aux colloques de la discipline. Ils modélisent la structure réticulaire de cette communauté en observant les associations de personnes, mouvantes au fil du temps, à travers le co-autorat, la co-citation, le partage des sources. Le workshop est un hub idéal, qui permet au réseau social de se cultiver tout en commettant des « items de travail » matérialisés par des documents publiés et susceptibles d’évaluation au sens académique du terme

La rotation géographique des conferences est observée, au même titre que leur périodicité. Les noms des organisateurs, le caractère composite de leur origine géographique, l’influence d’un noyau de personnalités marquantes susceptibles de mobiliser la communauté autour d’une thématique, font également partie des paramètres de cette modélisation.

Celle-ci définit enfin les caractéristiques d’un palier qui limite l’extension de la communauté et diminue son interactivité à un moment donné (suivant un phénomène d’érosion). Les signaux envoyés à cette étape limite déterminent la création ou la génération d’un nouveau réseau qui puisera dans le précédent les bases nécessaires à son épanouissement.

 

C’est à Trèves (Trier) que s’est développée la base DBLP (Digital Bibliography & Library Project) considérée par les informaticiens comme fondamentale au plan international pour la recherche documentaire dans ce champ disciplinaire. En parallèle, CiteSeerX permet d’effectuer de façon très fine des analyses bibliométriques assorties du fameux Triangle : références en fin d’article / références partagées par d’autres articles / co-citations ; et ce dans le domaine spécifiquement informatique. Le document d’analyse de la commission d’évaluation de l’INRIA de septembre 2007, souvent cité, intitulé Que mesurent les indicateurs bibliométriques ? prend appui sur ces deux outils. Ils servent aussi à étayer l’article de trois chercheurs de l’Université d’Aix-la-Chapelle (Aachen), qui a pour titre Development of Computer Science Disciplines – A Social Network Analysis Approach (Pham, Klamma, Jarke). À partir des données de colloques puisées dans les deux bases, les auteurs constituent deux réseaux : un knowledge network et un citation network. Le premier cartographie les conferences en fonction de leur thématique, en prenant les éléments précédemment décrits par Kienle et Wessner ; le second agit sur les citations, dans la perspective du triangle mentionné plus haut. Parallèlement, les venue proceedings de type ACM ou IEEE sont analysés. Ceux-ci, minoritaires, sont inclus dans des périodiques répertoriés par le JCR.

Ce qui frappe dans la visualisation des graphes afférant respectivement aux communications non répertoriées dans des publications en série (journals à proprement parler) et d’autre part à celles que recouvre ce second type de document, c’est que l’image du réseau résultant seulement des périodiques (The knowledge network using journals only) est éclaté, atomisé, peu structuré, ne permet pas la mise en valeur de thématiques clairement inscrites dans des flux relationnels intenses. L’autre graphique, en revanche (The combined knowledge network [giant component]) présente des caractéristiques inverses, illustrant bien la dynamique de ces hubs que constituent les colloques, sans que leur contenu soit fixé dans des périodiques homologués par ailleurs, notamment dans le JCR.

Le « réseau de connaissance », à travers des représentations successives, permet de voir l’émergence ou le déclin de sous-disciplines et des conglomérats de colloques typiques. Diamètre des nœuds et volume des traits de connexion (arêtes) varient au fil des années, voire des mois. Certes, ce genre d’observation s’applique à d’autres disciplines. Mais l’informatique l’illustre à un rythme très rapide avec une dynamique interrelationnelle particulièrement significative, du fait de la multiplicité, de l’hétérogénéité et de l’interopérabilité des composantes générées par les colloques. Leur structure extrêmement souple, leur organisation rapide, leur capacité d’accueil et leur ouverture, ajoutées à la brièveté des interventions, à leur relative spontanéité et aux facilités de communication entre acteurs, font des items de la « littérature informatique » un substrat très original par rapport à d’autres champs disciplinaires, qui se prêtent volontiers à des analyses de pratique informationnelle intéressantes. Activées par les réseaux sociaux scientifiques, l’interdisciplinarité ou la transversalité ne sont pas ici de vains mots.

Le « réseau de citations » est notamment mis en évidence à l’aide du PageRank permettant d’accroître la visibilité de groupes leaders qui en entraînent d’autres. On retrouve d’ailleurs cette conception à certains égards dans la mise en œuvre de l’Eigenfactor avec la traçabilité des citations.

Les paramètres de l’analyse du réseau se déclinent en quatre modalités selon Pham et al.: Density (M1), Clustering coefficient(M2), Maximum betweenness (M3), Largest connected component (M4). Autrement dit : la densité du graphe (proportionnelle au nombre d’arêtes et donc de liaisons entre les nœuds), le coefficient de regroupement (des nœuds), la centralité d’intermédiation optimale (qui, pour reprendre les termes de Sedki Allaoui, « reflète la capacité d’un chercheur à relier deux autres chercheurs provenant d’un même sous-réseau à travers le plus petit nombre d’intermédiaires »), enfin la notion de « plus grand graphe connecté » (aptitude d’un conglomérat de nœuds à inclure le plus grand nombre de connexions, et partant à s’imposer visuellement comme prépondérant).

Ces quatre modalités sont relativement classiques en matière d’analyse bibliométrique. Mais la production scientifique dans le domaine informatique offre cette caractéristique marquante de la différence entre une analyse effectuée directement à partir des items issus de ces colloques et leur fixation ou leur ancrage dans le cadre de périodiques prétendument reconnus (notamment par le JCR).

 

Sources : Andrea Kienle, Martin Wessner « Principles for Cultivating Scientific Communities of Practice » Communities and Technologies 2005  Proceedings of the Second Communities and Technologies Conference, Milano 2005. Ed. Peter Van Den Besselaar, G. De Michelis, J. Preece, C. Simone, pp 283-299. Dordrecht : Springer [e-books], 2005. Version O.A. http://www.socio-informatics.info/fileadmin/IISI/upload/C_T/2005/Paper15C_T2005.pdf

Manh Cuong Pham, Ralf Klamma, Matthias Jarke « Development of Computer Science Disciplines – A Social Network Analysis Approach » Social Network Analysis and Mining, November 2011, Volume 1, Issue 4, pp 321-340. Version O.A. http://arxiv.org/pdf/1103.1977

Sedki Allaoui Impact du financement sur la production scientifique des chercheurs à l’échelle des individus en nanotechnologie au Québec  École polytechnique de Montréal, 2011. http://publications.polymtl.ca/746/1/2011_SedkiAllaoui.pdf  Extrait cité p. 29 ; commenté dans: Catherine Beaudry, Sedki Allaoui « Impact of public and private research funding on scientific production: The case of nanotechnology » Research Policy, Volume 41, Issue 9, November 2012, pp 1589-1606

 

Éthique, évaluation, publication

La publication de l’article relatif au Boson de Higgs dans Physics Letters B suscite une nouvelle fois l’occasion de poser des questions cruciales sur l’éthique en matière de publication scientifique.

Le journal en question est publié par Elsevier dans un contexte de Golden O.A., dans le cadre des initiatives de SCOAP3, consortium monté par la communauté des chercheurs en Physique des Hautes énergies, pionnière en matière de libre accès. Agissant pour le compte de SCOAP3, le CERN a sélectionné 12 périodiques publiés par 7 éditeurs en vue de financer la publication d’articles. En 2011, étaient concernés 6600 articles. Sachant que le coût moyen nécessaire à la communauté pour payer le droit de publier dans ces revues se chiffre dans une fourchette allant de 1000 à 2000 $ par article, et que l’on souhaite épargner, autant que faire se peut, la contribution des laboratoires « auteurs », c’est au consortium qu’il appartient de régler la note, pour l’instant à hauteur d’environ 90 %. Idéalement, il faudrait financer le coût des 10 000 articles que cette communauté publie annuellement, chiffre à multiplier par le coût moyen que réclament les éditeurs à fort facteur d’impact pour chaque texte accepté.

On en revient toujours à l’implacabilité du système des facteurs d’Impact notamment dénoncé dès 2003 par Peter A.Lawrence et David Colquhoun dans Nature. Nul n’est d’ailleurs surpris outre mesure par le fait que ces critiques acerbes soient publiées dans un périodique qui, précisément, se distingue par son excellent I.F. Là comme ailleurs, la culture du paradoxe n’étonne plus.

Le groupe Nature  est représentatif du secteur biomédical dont on s’accorde à dire aujourd’hui qu’il est, sinon le seul, du moins le plus adapté à la structure du système d’évaluation fondé sur l’I.F. Les dérives dont pâtit la publication scientifique dans ce secteur sont connues depuis longtemps mais semblent s’accroître de façon significative ces dernières années. La compromission avec l’industrie pharmaceutique peut paraître anecdotique, mais elle est bien réelle et ses effets délétères ont déjà fait l’objet d’articles plus ou moins retentissants.

Ceux-ci relatent entre autres deux types de censure ; d’une part, celle que peut exercer la rédaction d’une revue sur les critiques émises par tel ou tel spécialiste à l’encontre d’articles susceptibles de vanter les mérites d’une molécule ou d’une méthode de thérapie chimique. D’autre part la censure exercée par défaut ou par omission lorsque les rapports émis négativement par la Food & Drug Administration à propos de telle molécule, sont passés sous silence ; non pas sur son éventuelle toxicité ou dangerosité aux doses prescrites, mais sur son inefficacité dans les essais cliniques par rapport à des placebos, par exemple. De même sur les effets secondaires, les rapports de la FDA peuvent être biaisés lors de la publication. Cet état de fait est assez grave, compte tenu de l’importance que l’on accorde aux Clinical Trials dans la recherche d’information médicale aujourd’hui.

Par ailleurs (mais certes, le secteur biomédical n’est pas le seul concerné), l’introduction grandissante de reviews dans les sommaires permet une augmentation « sournoise » des I.F. C’est le cas de la politique amorcée en la matière depuis quelque temps par The Lancet. On connaît bien cet épiphénomène de la course à l’I.F. que représente la diffusion et la très abondante citation des reviews. Il a néanmoins l’avantage de ne pas nuire à l’honnêteté intellectuelle et à la qualité de la recherche dans la mesure où ce type d’article ne sous-tend aucune réelle investigation élaborée en laboratoire.

Plus problématique est le phénomène de la vitesse contre lequel s’insurge le mouvement de la Slow Science. Car la nécessité de proposer rapidement de nouveaux résultats se traduit par des textes nombreux et parfois « risqués » dans leur contenus car n’ayant pas fait l’objet d’une contre-expertise suffisamment étoffée ou démultipliée, qui précisément implique du temps. Les études sur l’accroissement du phénomène de rétractation, i.e. de retrait d’articles (retraction  en anglais) sont nombreuses et s’accompagnent de constitution de bases de données ainsi que de blogs spécifiques.

« Depuis 2001, tandis que le nombre d’articles publiés dans les périodiques de recherche a cru de 44 %, le nombre de papiers ayant fait l’objet de rétractation s’est multiplié par 15, selon une enquête diligentée par Thomson Reuters pour le compte du Wall Street Journal. On ne relevait que 22 retraits en 2001, mais 139 en 2006 et 339 en 2010. De janvier à juillet 2011, le Web of Science en a compté 210. », rapporte Gautam Naik dans le WSJ (10 août 2011). Nature, Science et Cell sont des vedettes du genre.

 

Les Sciences humaines semblent être plus raisonnablement à l’abri de ces phénomènes de vitesse.  L’évaluation dans le domaine SHS représente à elle seule un vaste chantier, un sujet d’une importance capitale qui doit sortir de la gangue du silence ou de l’ombre portée par les méthodes appliquées dans le domaine STM. Les initiatives inspirées par l’IN-SHS du CNRS, comme JournalBase ou RIBAC, ou bien celles que suscite la Conférence des Publications en Psychologie de Langue Française (CPPLF) vis-à-vis de l’AERES et des éditeurs, constituent des avancées considérables que doit encourager la communauté. Les préconisations souvent timides du rapport du CDHSS d’octobre 2010 (pages 77 à 94) ont en effet pour caractéristique d’être perfectibles.