Lo strumento Problematic Paper Screener (PPS) esegue automaticamente delle "ricerche di impronte digitali" sul motore di ricerca accademico Dimensions.ai, alla ricerca di modelli testuali o strutturali che siano correlati a frodi note. Le irregolarità vengono identificate automaticamente utilizzando specifiche query di impronte digitali inviate a Dimensions.ai, e la valutazione umana da parte di esperti può quindi confermare o smentire lo stato di un articolo sospetto. L'interfaccia pubblica consente inoltre agli utenti di proporre nuove impronte digitali, in modo che l'elenco di rilevamento continui a crescere. (estratto da Wikipedia, come testo seguente).
Cosa cattura effettivamente:
- Frasi contorte — parafrasi confuse come "falsa organizzazione neurale" invece di "artificiale" rete neurale,” prodotto quando i truffatori fanno passare il testo rubato attraverso un software di scambio di sinonimi per eludere i controlli antiplagio.
- Testi senza senso generati al computer: documenti creati da generatori di nonsenso come SCIgen e Mathgen, identificati tramite frasi fisse che questi strumenti producono sempre, come "anche se molti scettici dicevano che non si poteva fare".
- Le impronte digitali di ChatGPT: frammenti residui di testo rivelatore generato dall'IA, lasciati accidentalmente in un manoscritto inviato, oltre a diversi altri tipi di rilevatori per elementi come schemi di citazione sospetti.
Il suo curriculum: lo strumento di screening è stato determinante in oltre 1.000 ritrattazioni e alcuni editori lo hanno integrato direttamente nel loro flusso di lavoro editoriale per individuare i documenti sospetti prima pubblicazione piuttosto che dopo. È stato nominato uno dei dieci sviluppi chiave nella scienza da Nature nel 2021. Oltre 12.000 articoli segnalati ma non ancora ritirati sono stati anche integrati in uno strumento separato chiamato Signals, dove sono citati collettivamente più di 160.000 volte, a dimostrazione di quanto a lungo una frode segnalata ma non ritirata possa continuare a circolare e influenzare altre ricerche prima che qualcuno intervenga formalmente.
Non sostituisce il giudizio editoriale umano, ma fa l'unica cosa che gli esseri umani non possono fare su larga scala: scansionare continuamente decine di milioni di documenti alla ricerca di indizi di frode e segnalare quelli sospetti affinché una persona li esamini effettivamente.
