aiAbstractCheck - Détection de résumé scientifique généré par IA
Ce web service détecte si le résumé d’un texte scientifique en anglais a été généré par intelligence artificielle ou non.
Le modèle possède une architecture de type BERT. Il a été fine-tuné sur un mélange de résumés issus d’Istex, et de résumés générés via plusieurs LLMs (Mistral7b, Gwen3b, LLama3.2, Deepseek7b principalement, avec quelques données gpt4).
La validation a été effectuée sur les jeux de données publiques suivants :
https://github.com/panagiotisanagnostou/AI-GA
https://www.kaggle.com/datasets/heleneeriksen/gpt-vs-human-a-corpus-of-research-abstracts
Ce modèle possède un f1-score de 0.88 en moyenne sur chacun des jeux de données.
| The Conditional Lie-Bäcklund Symmetry (CLBS) method is introduced to analyze systems of evolution equations. It is demonstrated that the ability to reduce a system of evolution equations to a system of ordinary differential equations can be entirely described by the CLBS of the given system. As an application, a specific class of two-component nonlinear diffusion equations is examined. The governing system and its corresponding CLBS are determined. Consequently, exact solutions are derived based on polynomial, exponential, trigonometric, and mixed invariant subspaces through symmetry reductions.” | ==> | {“isAiGenerated”: true,”score”: 1} |
Vous avez un corpus constitué de résumés en anglais. Pour des raisons de qualité, d’évaluation, vous avez besoin de savoir s’ils ont été générés automatiquement ou s’ils ont été rédigés manuellement.
En lançant aiAbstractCheck sur vos résumés depuis Lodex, logiciel libre de visualisation, vous saurez ce qu’il en est et vous pourrez réaliser des représentations graphiques liées à la part de résumés générés par une intelligence artificielle ou par une personne.
Exemple à partir d’un corpus “Véganisme et végétarisme” de 1768 documents