Jean Vinçot
Association Asperansa
Abonné·e de Mediapart

1612 Billets

0 Édition

Billet de blog 3 sept. 2022

Jean Vinçot
Association Asperansa
Abonné·e de Mediapart

"Enfants tarés" et expressions étranges apparaissant dans les études sur l'autisme

Des articles sur l'autisme comportent des expressions péjoratives ou bizarres. Cela peut être lié à des plagiats. Le Problematic Paper Screener vise à détecter ces anomalies.

Jean Vinçot
Association Asperansa
Abonné·e de Mediapart

Ce blog est personnel, la rédaction n’est pas à l’origine de ses contenus.

spectrumnews.org Traduction de "‘Tainted kids,’ other odd phrases cropping up in autism studies"

"Enfants tarés" et autres expressions étranges apparaissant dans les études sur l'autisme


Dalmeet Singh Chawla - 2 mai 2022

Illustration 1
© llustration par Natalie Nelson

En avril, la neuropsychologue du développement Dorothy Bishop a remarqué des phrases étranges dans une étude réalisée en 2021 sur des enfants autistes qui interagissaient avec un robot de type humain. Elle décrivait les enfants comme des "enfants tarés" et "médicalement introvertis", et faisait référence à l'autisme comme une "maladie" et un "déséquilibre mental".

"Cet article n'est pas seulement un charabia complet, mais il parvient également à être offensant pour les personnes autistes et leurs familles", a écrit Bishop, professeure de neuropsychologie du développement à l'université d'Oxford en Angleterre, sur le site d'évaluation par les pairs PubPeer, où les scientifiques discutent des articles de recherche.

L'étude fait partie de la demi-douzaine d'études sur l'autisme signalées par le Problematic Paper Screener, un outil en ligne qui recherche des "phrases tordues" - des paraphrases étrangement formulées de termes établis - et d'autres signaux d'alarme dans les travaux publiés. Selon Guillaume Cabanac, professeur associé d'informatique à l'université de Toulouse (France), qui a créé l'outil Problematic Paper Screener, ces phrases sont probablement le résultat d'universitaires qui tentent de contourner les détecteurs de plagiat en utilisant des logiciels de paraphrase, tels que SpinBot, pour générer des synonymes sans réfléchir.

Guillaume Cabanac a parcouru manuellement les phrases tordues de l'étude du robot après avoir publié les résultats de l'analyseur sur PubPeer en mars. Il a confirmé que l'auteur avait apparemment substitué "conscience artificielle" à "intelligence artificielle" et " affection d'Alzheimer" à "maladie d'Alzheimer". Il a vérifié des bizarreries similaires dans une étude de 2022 sur l'utilisation de méthodes d'apprentissage automatique pour détecter l'autisme dès le début de la vie.

Alexander Magazinov, ingénieur logiciel chez Yandex à Moscou, en Russie, et collaborateur de Cabanac, a passé au crible manuellement un article sur l'autisme paru en 2014 dans Frontiers in Psychiatry, qui a accumulé plus de 100 citations à ce jour. L'article a été repéré par l'outil de Cabanac, mais ne contient qu'une seule phrase potentiellement problématique : "super vector machine", au lieu de "support-vector machine" - probablement une erreur typographique malheureuse, disent plusieurs chercheurs, dont Bishop. Spectrum a contacté l'auteur de l'étude, Robert Hendren, psychiatre à l'Université de Californie, San Francisco, pour confirmation.

Le dépisteur a signalé trois autres études sur l'autisme - sur l'utilisation de l'apprentissage automatique pour prédire et classer les niveaux de la condition, et sur les chatbots ou la réalité virtuelle pour communiquer avec les enfants autistes - qui attendent encore un examen manuel. Spectrum a contacté les auteurs correspondants de toutes les études sur l'autisme en question.

"Je vois le Problematic Paper Screener comme un indicateur qui renseignerait les détectives sur des articles", déclare M. Cabanac, en précisant que tous les articles signalés doivent être examinés manuellement.

Le dépisteur a jugé qu'environ 7 650 études étaient problématiques, dont plus de 6 000 contenaient des phrases tordues. La plupart des articles contenant des phrases tordues semblent provenir des domaines de l'apprentissage automatique, de l'intelligence artificielle et de l'ingénierie. M. Cabanac dit qu'il n'est pas sûr de la raison pour laquelle les articles sur l'autisme ne font que commencer à apparaître.

Sur les six études sur l'autisme signalées, cinq sont des chapitres de livres. Un porte-parole de Wiley-Blackwell, qui a publié l'un des chapitres signalés, a déclaré que la société enquêtait sur ce chapitre conformément aux directives du Comité d'éthique des publications.

Et Springer Nature, qui a publié deux des chapitres, enquête sur un certain nombre de rapports relatifs à des phrases tordues, a déclaré Tamara Welschot, responsable du conseil et de l'assurance au sein du Research Integrity Group de l'éditeur.

"Nous avons également mis au point un outil qui évalue les manuscrits à la recherche de signes de manipulation artificielle, et cela a commencé à nous soutenir dans nos enquêtes proactives", explique Mme Welschot. "Les phrases tordues peuvent indiquer que des problèmes d'intégrité sont associés à un article ou à un chapitre, même si dans certains cas, elles peuvent indiquer qu'un article ou un chapitre est rédigé dans une langue qui n'est pas la langue principale de l'auteur."

Les articles signalés mettent en évidence l'absence d'un système d'examen par les pairs robuste et l'incapacité à corriger rapidement la littérature, affirme Jennifer Byrne, professeure d'oncologie moléculaire à l'université de Sydney en Australie et co-créatrice de l'un des détecteurs du Problematic Paper Screener qui identifie les erreurs dans les séquences génétiques.

"Le système a besoin d'une révision complète", déclare Mme Byrne en faisant référence à l'édition savante. Selon elle, les éditeurs n'ont pas suffisamment d'incitations pour s'assurer que leur contenu est solide. "Je pense qu'il doit y avoir une réaction assez forte de la part des lecteurs de la littérature pour indiquer que ce n'est tout simplement pas acceptable et que cela ne sera pas toléré."

Bishop, cependant, dit que les papiers avec des phrases tordues n'ont probablement pas beaucoup d'impact. 

 "Je suis très préoccupée par la science douteuse qui est ensuite prise au sérieux, où le travail est repris et construit et cité", dit-elle. "Mais ces choses ne le seraient pas parce qu'elles sont si bizarres et qu'elles ne veulent rien dire."

Citer cet article : https://doi.org/10.53053/QDNM9905

Ce blog est personnel, la rédaction n’est pas à l’origine de ses contenus.

Bienvenue dans Le Club de Mediapart

Tout·e abonné·e à Mediapart dispose d’un blog et peut exercer sa liberté d’expression dans le respect de notre charte de participation.

Les textes ne sont ni validés, ni modérés en amont de leur publication.

Voir notre charte