LTT Edouard Machery Are Perverse Incentives Responsible for the Replication Crisis 11172020

Valeur des informations & solidité de l’argumentation

La conférence offre une analyse nuancée et critique de la crise de la réplication, en distinguant clairement les causes proximales et distales. L’argumentation est solide : Machery s’appuie sur des études empiriques (Fanelli 2010, Open Science Collaboration 2015, Begley & Ellis 2012) pour établir l’existence du problème, puis déconstruit méthodiquement le récit dominant sur les incitations. Il utilise des exemples concrets (power posing, volonté) pour illustrer les littératures fantômes. Cependant, sa remise en cause du rôle des incitations repose en partie sur des arguments conceptuels et des interprétations personnelles, et il ne propose pas d’alternative empirique complète. La valeur ajoutée réside dans la clarification conceptuelle et la stimulation d’un débat nécessaire.

Rigueur scientifique, qualité des sources, adéquation du titre

La rigueur scientifique est élevée : les sources citées sont des articles de référence dans le domaine de la méta-science, publiés dans des revues prestigieuses (Science, Nature, etc.). Machery distingue soigneusement les faits établis des interprétations. Le titre est fidèle au contenu, bien que la question posée soit traitée de manière argumentative plutôt que par une revue exhaustive. L’adéquation titre/contenu est bonne, mais le titre pourrait laisser attendre une réponse définitive, alors que la conférence propose plutôt une thèse critique.

Le titre reflète exactement le contenu : la conférence examine si les incitations perverses sont responsables de la crise de la réplication.

8/10

Conférence académique par un philosophe des sciences reconnu, s'appuyant sur des études publiées dans des revues à comité de lecture (Fanelli 2010, Open Science Collaboration 2015, Begley & Ellis 2012). L'argumentation est structurée et nuancée, mais certaines affirmations (comme la remise en cause des incitations) sont présentées comme des positions personnelles sans revue exhaustive de la littérature.

Repères établis par PSI à partir de la transcription : le créateur n'a pas défini de chapitres.

• 00:00Introduction par le directeur du centre, annonces des événements à venir.
• 05:00Début de la conférence : définition de la 'fake science' et distinction avec la science marginale.
• 10:00Présentation des preuves de la crise : graphique de Fanelli (2010) sur les taux de résultats positifs.
• 15:00Discussion sur la puissance statistique des études en psychologie et en biomédecine.
• 20:00Présentation de l'étude de l'Open Science Collaboration (2015) sur les échecs de réplication.
• 25:00Introduction du concept de 'littératures fantômes' avec les exemples du power posing et de la volonté.
• 30:00Identification des pratiques de recherche douteuses (QRP) comme causes proximales.
• 35:00Explication de la thèse des incitations perverses, avec citation de Stuart Ritchie.
• 40:00Analyse des motivations des scientifiques : quête de reconnaissance et carrière.
• 45:00Remise en cause du rôle des incitations et proposition d'une approche alternative.

• Fanelli, D. (2010). 'Positive' results increase down the Hierarchy of the Sciences. — Cité pour montrer la proportion élevée de résultats positifs dans diverses disciplines.
• Open Science Collaboration (2015). Estimating the reproducibility of psychological science. — Cité pour documenter le faible taux de réplication en psychologie.
• Begley, C. G., & Ellis, L. M. (2012). Drug development: Raise standards for preclinical cancer research. — Cité pour les échecs de réplication en oncologie.
• Ritchie, S. (2020). Science Fictions: How Fraud, Bias, Negligence, and Hype Undermine the Search for Truth. — Cité comme exemple de la thèse des incitations perverses.

• Simmons, J. P., Nelson, L. D., & Simonsohn, U. (2011). False-Positive Psychology: Undisclosed Flexibility in Data Collection and Analysis Allows Presenting Anything as Significant. — Étude clé sur les pratiques de recherche douteuses et les faux positifs.
• Ioannidis, J. P. A. (2005). Why Most Published Research Findings Are False. — Article fondateur sur la prévalence des faux positifs dans la littérature scientifique.

• Nosek, B. A., Spies, J. R., & Motyl, M. (2012). Scientific Utopia: II. Restructuring Incentives and Practices to Promote Truth Over Publishability.