Le côté obscur des citations académiques
Cet article examine la manipulation des citations et ses effets sur l'évaluation de la recherche.
― 9 min lire
Table des matières
- L'Importance des Citations
- Résultats de l'enquête
- Identification des Modèles de Citation Inhabituels
- Comparaison des Auteurs Suspects
- Réseaux de Citation
- L'Achat de Citations
- Pourquoi l'Achat de Citations Est Problématique
- Le Rôle des Serveurs de Pré-impression
- La Vulnérabilité de Google Scholar
- L'Émergence des Usines à Citations
- Le Rôle de l'Intelligence Artificielle
- Solutions Potentielles
- Conclusion
- Source originale
- Liens de référence
Les Citations sont un moyen pour les chercheurs de reconnaître le travail des autres dans leur domaine. Elles aident à montrer l'importance du travail d'un scientifique en comptant combien de fois d'autres chercheurs font référence à leurs articles. Cependant, certains chercheurs peuvent gonfler leurs métriques de citation pour diverses raisons, y compris la compétition pour le financement, les emplois ou la reconnaissance.
Cet article examine les méthodes que certains scientifiques utilisent pour manipuler les Comptes de citation, en se concentrant sur la façon dont les citations peuvent être achetées. Nous allons discuter de l'impact de cette pratique sur l'évaluation des chercheurs et les systèmes utilisés pour mesurer le succès académique.
L'Importance des Citations
Les citations sont devenues un facteur clé dans l'évaluation des chercheurs. Elles aident à déterminer qui obtient des financements, des promotions et des postes académiques. De nombreuses universités et institutions s'appuient sur les métriques de citation, comme l'indice h, pour évaluer la performance de leurs chercheurs. Ce focus sur les citations a créé un environnement hautement compétitif dans le milieu académique, poussant certaines personnes à chercher des moyens d'augmenter artificiellement leurs comptes de citation.
Résultats de l'enquête
Pour comprendre à quelle fréquence les citations sont utilisées dans les évaluations académiques, nous avons sondé les membres du corps professoral de grandes universités. Les résultats ont révélé que la plupart des membres du corps professoral considèrent les citations comme importantes lors de l'embauche ou de la promotion de candidats. Google Scholar est apparu comme la source la plus populaire pour obtenir des données de citation, dépassant d'autres bases de données. Cette préférence pour Google Scholar indique un problème potentiel, car la plateforme peut être vulnérable à la manipulation.
Identification des Modèles de Citation Inhabituels
En explorant les données, nous avons trouvé de nombreux profils avec des modèles de citation étranges. Les scientifiques avec des pics de citation inhabituels ont peut-être participé à des pratiques discutables pour booster leurs métriques. Nous nous sommes concentrés sur cinq exemples de tels profils, révélant que ces auteurs avaient reçu un nombre disproportionné de citations provenant de certains articles.
Comparaison des Auteurs Suspects
En comparant des auteurs suspects à leurs homologues correspondants, nous avons remarqué des différences significatives dans les modèles de citation. Les auteurs avec des histoires de citation normales ont montré des augmentations progressives des citations, tandis que les auteurs suspects ont connu des pics soudains. Ces divergences ont soulevé des préoccupations quant à la légitimité des comptes de citation attribués à ces individus.
En outre, nous avons analysé le nombre de citations provenant de ce que nous avons appelé des "articles citants". Les auteurs suspects étaient souvent référencés beaucoup plus de fois dans ces articles que leurs pairs correspondants. Cela suggère une méthode pour gonfler les comptes de citation en citant sélectivement certaines personnes sans fondement académique légitime.
Réseaux de Citation
Pour approfondir notre enquête, nous avons construit des réseaux de citation. Ces réseaux nous permettent de visualiser les connexions entre différents articles et auteurs. Nous avons identifié des clusters d'articles qui partageaient de nombreuses références communes. Ce modèle suggère un effort coordonné pour augmenter les comptes de citation pour certains auteurs, pointant vers un comportement potentiellement contraire à l'éthique au sein de certaines revues.
L'Achat de Citations
Au cours de notre enquête, nous sommes tombés sur un service qui propose de vendre des citations. En nous faisant passer pour un chercheur fictif, nous avons contacté ce service et avons réussi à acheter des citations. Cette expérience a confirmé qu'il est en effet possible d'acheter des citations en vrac moyennant des frais.
Nous avons découvert que les achats de citations sont généralement effectués par plusieurs articles académiques. Certains de ces articles avaient un nombre élevé de références à l'auteur fictif, mais beaucoup de ces références étaient sans rapport avec le contenu réel des articles.
Pourquoi l'Achat de Citations Est Problématique
L'acte d'acheter des citations soulève plusieurs problèmes au sein de la communauté académique. D'abord, cela mine l'intégrité des processus d'évaluation de la recherche. Lorsque les universités utilisent des comptes de citation pour évaluer les chercheurs, elles pourraient sans le vouloir récompenser ceux qui participent à des pratiques trompeuses.
De plus, la manipulation des citations peut déformer le paysage concurrentiel dans le milieu académique. Les chercheurs qui participent à de telles pratiques pourraient obtenir un avantage injuste sur leurs pairs, créant un environnement où les contributions authentiques à la science sont négligées.
Le Rôle des Serveurs de Pré-impression
Les serveurs de pré-impression permettent aux chercheurs de partager leurs découvertes avant qu'elles ne passent par la révision par les pairs. Lors de notre enquête, nous avons remarqué que certains auteurs téléchargeaient des articles de faible qualité sur ces serveurs pour gonfler leurs comptes de citation. Dans certains cas, les auteurs ont créé de faux profils associés à des universités inexistantes.
Ces articles, bien que manquant de mérite scientifique, ont été indexés par Google Scholar, contribuant à la métrique de citation des auteurs. Cela met en évidence un défaut significatif dans le processus d'indexation, qui ne vérifie pas la qualité ou la crédibilité des articles qu'il inclut.
La Vulnérabilité de Google Scholar
Google Scholar joue un rôle significatif dans l'évaluation des chercheurs. Cependant, son manque de modération permet la manipulation des métriques de citation. Lorsque des profils suspects sont créés, la plateforme échoue à les détecter et à les supprimer, permettant aux utilisateurs de continuer à gonfler leurs citations sans responsabilité.
L'absence de mesures de vérification signifie que des citations frauduleuses peuvent persister indéfiniment sur la plateforme, permettant une manipulation continue des métriques académiques. Ce problème est aggravé par l'utilisation généralisée de Google Scholar, rendant crucial de traiter ses vulnérabilités.
L'Émergence des Usines à Citations
L'achat de citations a conduit à l'émergence de ce que nous appelons "usines à citations". Ce sont des services qui fournissent aux chercheurs un grand nombre de citations en échange de paiement. Les usines à citations fonctionnent de manière similaire aux éditeurs prédateurs, qui publient des articles de faible qualité sans révision par les pairs rigoureuse.
La présence des usines à citations menace la fiabilité des métriques de citation et jette le doute sur l'intégrité de la recherche scientifique. Si la communauté académique ne prend pas de mesures pour traiter ce problème, la crédibilité de la recherche pourrait être compromise.
Le Rôle de l'Intelligence Artificielle
Avec les avancées de l'intelligence artificielle, la possibilité de générer de faux articles de recherche est devenue plus faisable. Les chercheurs peuvent utiliser l'IA pour créer des articles qui semblent légitimes tout en contenant des citations fabriquées. Cela soulève des inquiétudes sur l'avenir de l'intégrité académique alors que la technologie continue d'évoluer.
Générer des papiers convaincants, mais non scientifiques, ne fera que faciliter la tâche à ceux qui cherchent à manipuler les comptes de citation. À mesure que les chercheurs adoptent de plus en plus des outils d'IA, il y a un risque que les frontières entre la recherche légitime et frauduleuse s'estompent davantage.
Solutions Potentielles
Pour combattre la manipulation des citations, les bases de données bibliographiques et les institutions académiques doivent mettre en œuvre des mesures qui améliorent le processus d'évaluation. Voici quelques étapes suggérées :
Métriques Améliorées : Développer de nouvelles métriques qui capturent mieux les pratiques de citation pourrait aider à identifier les profils suspects. Par exemple, un indice qui suit le pourcentage de citations provenant d'un petit nombre d'articles pourrait révéler une manipulation potentielle.
Transparence des Données : Les bases de données bibliographiques devraient fournir plus de transparence sur la façon dont les citations sont accumulées. Filtrer les métriques sur la qualité des sources pourrait améliorer l'évaluation des chercheurs.
Formation à la Sensibilisation : Les évaluateurs devraient recevoir une formation pour reconnaître les tactiques de manipulation. Comprendre les différentes façons dont les citations peuvent être déformées aidera les comités de recrutement à prendre des décisions plus éclairées.
Implication des Chercheurs : Les chercheurs eux-mêmes devraient plaider en faveur de pratiques plus rigoureuses. En poussant collectivement pour le changement, la communauté académique peut aider à garantir que les métriques de citation reflètent de vraies contributions à la recherche.
Collaboration avec les Revues : Les revues devraient établir des directives claires sur les pratiques de citation et mettre en œuvre des mesures pour détecter et prévenir la manipulation des citations. Cette collaboration contribuera à maintenir l'intégrité du processus de révision par les pairs.
Conclusion
Les citations sont une partie vitale de la recherche académique, mais leur mauvaise utilisation peut saper tout le système. Comme nous l'avons vu, l'achat de citations et l'essor des usines à citations posent de sérieux défis à l'évaluation des scientifiques. Traiter ces problèmes est essentiel pour préserver la crédibilité de la recherche académique et garantir que les contributions authentiques soient reconnues de manière appropriée.
La communauté académique doit travailler ensemble pour améliorer les pratiques de citation et renforcer l'intégrité du processus d'évaluation. En prenant des mesures pour identifier et combattre la manipulation, nous pouvons favoriser un environnement où la recherche de qualité est valorisée, et où les scientifiques peuvent prospérer en fonction de leurs vraies contributions au domaine.
Titre: Google Scholar is manipulatable
Résumé: Citations are widely considered in scientists' evaluation. As such, scientists may be incentivized to inflate their citation counts. While previous literature has examined self-citations and citation cartels, it remains unclear whether scientists can purchase citations. Here, we compile a dataset of ~1.6 million profiles on Google Scholar to examine instances of citation fraud on the platform. We survey faculty at highly-ranked universities, and confirm that Google Scholar is widely used when evaluating scientists. Intrigued by a citation-boosting service that we unravelled during our investigation, we contacted the service while undercover as a fictional author, and managed to purchase 50 citations. These findings provide conclusive evidence that citations can be bought in bulk, and highlight the need to look beyond citation counts.
Auteurs: Hazem Ibrahim, Fengyuan Liu, Yasir Zaki, Talal Rahwan
Dernière mise à jour: 2024-02-07 00:00:00
Langue: English
Source URL: https://arxiv.org/abs/2402.04607
Source PDF: https://arxiv.org/pdf/2402.04607
Licence: https://creativecommons.org/licenses/by/4.0/
Changements: Ce résumé a été créé avec l'aide de l'IA et peut contenir des inexactitudes. Pour obtenir des informations précises, veuillez vous référer aux documents sources originaux dont les liens figurent ici.
Merci à arxiv pour l'utilisation de son interopérabilité en libre accès.