Revue de littérature CER : extraction de données fiabilisée et rapports jusqu’à 200 articles

Octobre a été un mois chargé chez NOÉ. Trois versions sont passées en production : 4.10, 4.11 et 4.12. Elles visent un même objectif : vous faire gagner du temps sur vos revues systématiques de la littérature, sans rien céder sur la fiabilité.

Au programme : une extraction des données repensée, des rapports jusqu’à 200 articles et un contrôle automatique des citations. Voici ce qui change pour vous.

Pourquoi ces évolutions

Une revue systématique de la littérature pour un CER ou un état de l’art prend des semaines (voir notre comparaison des temps de revue manuelle et avec NOÉ). L’essentiel du temps part dans l’extraction des données. Il faut relire chaque article, repérer les chiffres, vérifier leur source.

Vos retours nous ont montré deux limites. D’abord, certains types d’articles piégeaient l’IA. Ensuite, nos rapports plafonnaient à 50 articles. Or beaucoup de revues en comptent 100, 150, parfois 200.

Ces retours ont directement façonné les versions d’octobre. Merci à vous.

Une extraction des données qui comprend le type d’article

C’est la nouveauté la plus importante du mois. NOÉ identifie désormais le type de chaque article avant d’en extraire les données.

Le problème : les chiffres des autres

Une revue narrative cite de nombreuses études. Ses chiffres ne sont souvent pas les siens. Ils viennent des articles qu’elle cite.

Une IA peut alors se tromper. Elle attribue un résultat à l’article lu, alors qu’il provient d’une autre étude. Ou elle le rattache à la mauvaise référence. Pour un évaluateur clinique, c’est une erreur grave.

La solution : une extraction adaptée à chaque type d’article

NOÉ distingue maintenant plusieurs familles d’articles :

• les revues systématiques et méta-analyses ;

• les études primaires ;

• les revues narratives ;

• les classifications, suppléments et autres formats.

Chaque famille reçoit des instructions d’extraction adaptées. Les chiffres sont reliés à la bonne source. Un résultat cité reste attribué à l’étude d’origine.

Des résultats mesurés

Nous avons testé cette évolution sur notre jeu de contrôle interne. Il réunit des articles volontairement difficiles : revues narratives, classifications, suppléments. La qualité globale de l’extraction est passée de 73 % à 90 %.

Cette évolution est déjà disponible pour tous les utilisateurs NOÉ.

D’autres améliorations du rapport

• Affichage progressif. Les résultats apparaissent au fur et à mesure. Vous commencez à travailler sans attendre la fin.

• Tableaux plus lisibles. La présentation des données extraites a été nettoyée.

• Risques cliniques plus souples. Ils ne doivent plus obligatoirement être cités pour apparaître.

• PICOS courts mieux gérés. Les critères d’un à trois mots fonctionnent correctement (rappel sur la méthode PICOS en évaluation clinique).

• Questions personnalisées. Les titres longs ne déforment plus l’affichage.

Des rapports jusqu’à 200 articles

Jusqu’ici, un rapport NOÉ couvrait 50 articles au maximum. Vous pouvez maintenant générer un rapport sur une revue de 150 à 200 articles.

Comment ça marche

NOÉ ne traite plus la revue d’un seul bloc. Le rapport est construit en plusieurs étapes, chacune vérifiée :

1. NOÉ découpe votre plan en sections.

2. Chaque section reçoit les catégories de données qui la concernent.

3. Les articles sont traités par lots, puis résumés.

4. Chaque section est rédigée à partir de ces résumés.

Résultat : aucune information n’est écartée pour tenir dans une limite. Chaque section ne reçoit que les données utiles. Le rapport gagne en précision.

Un temps de génération assumé

Un gros rapport demande du temps. Comptez 30 à 40 minutes pour une soixantaine d’articles.

NOÉ vous prévient avant de lancer. Et les sections s’affichent dès qu’elles sont prêtes. Une introduction arrive en quelques minutes. Une section sur les performances, riche en tableaux, prend plus longtemps, comme pour un rédacteur humain.

L’Expert Check : un relecteur automatique pour vos citations

Plus un rapport est long, plus le risque d’erreur de citation augmente. C’est vrai pour une IA. C’est vrai aussi pour un humain. Au 56e article, on peut confondre deux références.

L’Expert Check vérifie automatiquement les chiffres et les citations. Il se concentre sur les parties les plus sensibles : les tableaux, la discussion et la conclusion.

Prenons un exemple. Le rapport indique « 3 % » et cite l’article 8. L’Expert Check cherche ce chiffre dans l’article 8. S’il ne le trouve pas, il le signale en orange. Le chiffre est peut-être juste, issu d’un calcul. Mais vous êtes invité à vérifier.

Nous avons fait un choix délibéré. L’Expert Check ne réécrit pas le texte. Une réécriture automatique risquerait d’introduire de nouvelles erreurs. Il agit comme un collègue relecteur : il commente, vous décidez. Sur la place de l’expert face à l’IA, lisez aussi notre article sur la double revue humaine dans une revue systématique assistée par IA.

À l’export Word, ces signalements apparaissent sous forme de commentaires. Vous les traitez comme une relecture classique.

C’est notre conviction depuis le début. L’IA accélère le travail. L’expert garde la main. C’est ce qu’attendent le règlement (UE) 2017/745 (MDR), le guide MEDDEV 2.7/1 rev. 4 et votre organisme notifié : des données traçables et vérifiées.

La suite : NOÉ Elephas arrive

Octobre a posé les fondations. La prochaine version majeure, NOÉ 5, arrive dans les prochaines semaines. Nous l’avons baptisée Elephas : puissante, intelligente, et dotée d’une excellente mémoire.

Au programme :

• Mise à jour des revues. Créez une nouvelle version de votre revue sans repartir de zéro. NOÉ garde la trace de chaque version. Vous savez d’où vient chaque article. Le PRISMA cumule les versions.

• Statistiques et visualisation des données. Des graphiques et des tableaux de synthèse : type d’étude, population, niveau de preuve, dispositif, critères de jugement. Vous ajoutez ou retirez les colonnes selon vos besoins.

• Data extraction personnalisée. Une extraction adaptée à vos propres grilles.

Un nouveau module de matériovigilance suivra.

Essayez les nouveautés

Toutes les améliorations d’octobre sont déjà disponibles dans votre espace NOÉ. Pour une vue d’ensemble, découvrez toutes les fonctionnalités de NOÉ pour la revue de littérature. Vous n’utilisez pas encore NOÉ ? Réservez une démo de NOÉ. Nous vous montrons ce que NOÉ fait sur votre propre dispositif.

À propos de l’autrice — Bopha, fondatrice de NOÉ. Bopha a créé NOÉ pour assister les équipes affaires réglementaires et évaluation clinique dans leurs revues systématiques de la littérature (CER, états de l’art, MDR/IVDR). Sa conviction : l’IA accélère le travail, l’expert garde la main.