Product Design, Manufacturing & Innovation Resources
Maison » Outils en ligne » Outil de sélection des documents problématiques (PPS)

Outil de sélection des documents problématiques (PPS)

L'outil Problematic Paper Screener (PPS) effectue des « requêtes d'empreinte » automatisées sur le moteur de recherche académique Dimensions.ai, afin de déceler des schémas textuels ou structurels corrélés à des fraudes connues. Les pratiques frauduleuses sont automatiquement identifiées grâce à des requêtes d'empreinte spécifiques soumises à Dimensions.ai, et l'évaluation par les pairs permet ensuite de confirmer ou d'infirmer le statut suspect d'un article. L'interface publique permet également aux utilisateurs de proposer de nouvelles empreintes, ce qui permet d'enrichir constamment la liste de détection. (Extrait de Wikipédia, voir ci-dessous).

Ce qu'il capture réellement :

  • Des phrases torturées — des paraphrases confuses comme « fausse organisation neuronale » au lieu de « artificielle » réseau neuronal,&8221; produit lorsque des fraudeurs utilisent un logiciel de substitution de synonymes pour faire passer un texte volé afin de contourner les vérificateurs de plagiat.
  • Charabia généré par ordinateur — articles construits à partir de générateurs de non-sens comme SCIgen et Mathgen, identifiés via des phrases fixes que ces outils produisent toujours, telles que « bien que de nombreux sceptiques aient dit que cela ne pouvait pas être fait ».
  • Les empreintes digitales ChatGPT — des fragments de texte révélateurs générés par l'IA et laissés accidentellement dans un manuscrit soumis, ainsi que plusieurs autres types de détecteurs pour des éléments tels que des schémas de citation suspects.

Son bilan : cet outil de sélection a joué un rôle déterminant dans plus de 1 000 rétractations, et certains éditeurs l'ont intégré directement à leur processus éditorial pour repérer les articles suspects avant publication. publication et non après. Elle a été désignée comme l'une des dix avancées scientifiques majeures par Nature en 2021. Plus de 12 000 articles signalés mais non encore rétractés ont également été intégrés à un outil distinct appelé Signals, où ils sont cités collectivement plus de 160 000 fois, illustrant ainsi la durée pendant laquelle une fraude signalée mais non rétractée peut continuer à circuler et à influencer d'autres recherches avant que quiconque n'agisse officiellement à ce sujet.

Cela ne remplace pas le jugement éditorial humain, mais cela fait la seule chose que les humains ne peuvent pas faire à grande échelle : scanner en continu des dizaines de millions de documents à la recherche d'empreintes digitales de fraude et faire remonter les documents suspects pour qu'une personne puisse les examiner.

Disciplines : Intégrité de la recherche, publication scientifique, bibliométrie, recherche universitaire.
Alternative gratuite à l'alarme Clear Skies Papermill, Dimensions.
Comparaison entre le tamiseur de papier problématique et l'alarme de papeterie Clear Skies et ses dimensions
Outil de sélection des documents problématiques (PPS)Alarme de l'usine de papier Clear SkiesDimensions
Approche de détection : PPS effectue des requêtes d'empreintes digitales, qui sont des séquences de mots fixes. Elles ciblent des phrases complexes telles que « fausse organisation neuronale pour réseau de neurones artificiels » et les résultats de générateurs de texte comme SCIgen et Mathgen. Une correspondance n'est qu'une suspicion.Approche de détection : Le système Papermill Alarm attribue à chaque document un score de type feu tricolore. Le rouge indique une forte similarité avec le contenu connu des papeteries, l'orange une similarité modérée et le vert aucune ressemblance. Clear Skies précise avoir conservé uniquement les méthodes de détection présentant un réel pouvoir prédictif, notamment l'analyse textuelle basée sur l'IA et l'analyse de réseaux.Approche de détection : Dimensions n'est pas un détecteur. Dans ce cas précis, il s'agit du moteur de recherche académique auquel PPS soumet ses requêtes d'empreinte digitale.
Données et entrées : PPS effectue régulièrement des recherches dans l'index Dimensions, ce qui permet de vérifier les articles nouvellement indexés. Chaque référence signalée renvoie à sa fiche Dimensions, à son DOI, aux empreintes digitales trouvées dans le texte intégral et aux publications PubPeer associées.Données et entrées : Le système est décrit comme s'améliorant automatiquement grâce à l'intégration de nouvelles données provenant des éditeurs. La version publique, lancée en 2022, est optimisée pour la recherche sur le cancer.Données et entrées : Dimensions met en relation publications, ensembles de données, subventions, brevets, essais cliniques, documents et rapports de politique, ainsi que chercheurs et organisations. Il s'agit d'une base de données bibliométriques, et non d'un corpus de sélection.
Accès et utilisateurs : PPS dispose d'une interface en ligne publique permettant à chacun de consulter les articles suspects et de proposer de nouvelles pistes. L'objectif est la réévaluation post-publication par les chercheurs, les enquêteurs et les éditeurs.Accès et utilisateurs : Les éditeurs sont les utilisateurs cibles. L'accès est proposé via une API, soit par le biais d'un accord direct, soit par l'intermédiaire de partenaires tels que STM Integrity Hub et Morressier. L'intégration des éditeurs au sein du Hub est optionnelle.Accès et utilisateurs : L'accès se fait via l'application web ou une API. La page API propose une démonstration ou un devis sur demande et présente les offres d'abonnement. Lors de son lancement en 2018, Dimensions proposait également une version de base gratuite et des formules payantes.
Limites de validité : La détection repose sur des empreintes connues ; de ce fait, de nouveaux générateurs ou formulations peuvent passer inaperçus jusqu’à ce qu’ils soient ajoutés. Les signalements restent des suspicions jusqu’à ce que des pairs humains classent le document comme problématique ou non. Les auteurs ne fournissent aucun taux de précision ni d’erreur, et la validation porte principalement sur des textes générés par ordinateur et synonymisés.

Plus OSINT, Recherche tools

Suggérez votre meilleur outil en ligne :

Connaissez-vous un site web meilleur, complémentaire ou de remplacement à celui mentionné ci-dessus ?

> Proposez-le ici <

10e année anniversaire

Les images en pleine résolution et les téléchargements sont uniquement disponibles, et 100% gratuits, pour les membres inscrits.