Quatre cents résumés, c’est un volume normal pour une revue modeste. À une minute chacun, cela fait une journée de travail complète, et personne ne trie bien huit heures d’affilée. Vers le 250e résumé, les décisions commencent à dériver, et au 350e vous incluez des articles que vous auriez exclus le matin même.
Le tri n’exige pas d’héroïsme. Il exige une structure.
Avant de commencer : écrivez vos critères
Rédigez quatre ou cinq critères d’inclusion sous forme d’énoncés courts et vérifiables : population, exposition ou intervention, critère de résultat, type d’étude, période. Si un critère demande un paragraphe d’explication, scindez-le. Testez-les sur 20 résumés et ajustez-les avant d’aller plus loin.
Trois décisions, pas deux
Inclure, exclure, incertain. La pile « incertain » vous permet d’avancer. La plupart des gens perdent leur temps à hésiter sur chaque résumé limite, un par un ; les regrouper à la fin est plus rapide et plus cohérent.
Travaillez par blocs de 50
Faites une pause entre les blocs, et relisez vos critères avant chacun. Cela paraît anodin. C’est pourtant la meilleure protection contre la dérive.
Confiez le premier passage à l’IA, avec des justifications
L’apprentissage automatique sert depuis des années à accélérer le tri dans la synthèse des preuves [1]. L’essentiel n’est pas la vitesse, mais la traçabilité. Un premier passage n’est utile que si vous voyez pourquoi chaque article a été retenu ou exclu, et si vous pouvez vérifier vous-même les cas limites.
Dans tlooto, chaque candidat est évalué selon des critères d’inclusion explicites tirés de votre question, à l’image de l’étape de tri d’une revue systématique. Les articles retenus sont classés et transmis à la synthèse sous forme d’un corpus de preuves ciblé, et le panneau Processus de travail montre ce qui a été retenu et pourquoi.
Pour une revue systématique formelle, considérez cela comme un second évaluateur ou une étape de priorisation, et non comme un substitut à votre protocole. Maintenez le double tri là où votre méthodologie l’exige, et déclarez l’assistance de l’IA en toute transparence, conformément à PRISMA 2020.
Une liste de contrôle pour sauver votre week-end
- Critères rédigés et testés sur 20 résumés.
- Trois décisions : inclure, exclure, incertain.
- Blocs de 50, critères relus avant chaque bloc.
- Premier passage par l’IA avec des raisons visibles ; vous vérifiez les cas incertains et limites.
- Chaque motif d’exclusion consigné pour votre diagramme de flux.
Voir le tri dans un rapport tlooto →
Références
[1] Marshall, I. J., & Wallace, B. C. (2019). Toward systematic review automation: a practical guide to using machine learning tools in research synthesis. Systematic Reviews, 8. https://doi.org/10.1186/s13643-019-1074-9