RuCCS-Drs. Jacob Feldman & Susanna Schellenberg- Double Feature Dialogue-Tuesday, September 15, 2026

Valeur des informations & solidité de l’argumentation

La valeur informative de cette intervention réside dans la construction d’un banc d’essai commun permettant de comparer humains et IA sur une même tâche, ce qui est rare dans un domaine où les comparaisons relèvent souvent de la spéculation. Le GOHR présente l’avantage d’être accessible aux deux types d’agents, de permettre la randomisation des règles et de générer des mesures quantitatives (nombre de coups avant résolution). L’argumentation de Feldman progresse de manière méthodique : après avoir montré l’écart brut de performance (68 vs 8 000 coups), il anticipe lui-même l’objection d’iniquité de la comparaison (sujet humain non naïf contre IA blank slate) et recentre le propos sur la question du transfert, plus équitable car elle porte sur l’effet de l’expérience préalable. Le dispositif expérimental A/B/A+B avec contrôle incongruent (C+D) est bien conçu pour isoler l’effet de compositionnalité. Le résultat négatif — absence de transfert chez l’IA et décorrélation avec le transfert humain — est présenté comme un constat empirique plutôt qu’une affirmation définitive, ce qui renforce la crédibilité. L’argumentation de Schellenberg est plus conceptuelle : elle procède par identification d’analogies (auto-attention, méta-RL, second-guessing) puis par évaluation critique de leur portée limitée. Sa thèse — l’autoréférence générale comme clé du prochain palier de l’IA — est un plaidoyer programmatique, moins étayé empiriquement que la partie de Feldman, mais cohérent avec la littérature en philosophie de l’esprit et en sciences cognitives. La faiblesse principale tient à l’absence de données chiffrées complètes et de tests statistiques détaillés dans la présentation orale, ainsi qu’à la non-publication accessible des résultats évoqués.

Rigueur scientifique, qualité des sources, adéquation du titre

La rigueur méthodologique est globalement solide : recrutement sur Prolific avec exclusion des sujets ayant déjà participé, comparaison entre conditions congruentes et incongruentes, distinction entre tous les sujets et les meilleurs sujets pour épurer les données, et utilisation d’un modèle RL de référence (A2C avec transformers) avec plusieurs jeux de paramètres. L’orateur reconnaît explicitement les limites de la comparaison et ne surinterprète pas ses résultats. La qualité des sources est toutefois difficile à évaluer : la description ne contient aucun lien vers une publication, un preprint ou un jeu de données, et les références mentionnées oralement (Paul Gander, How Wang, Lazarus Gallas, Vladimir Menov) ne sont pas accompagnées de citations bibliographiques précises. L’évocation de Jerry Fodor et Zenon Pylyshyn sur la compositionnalité reste allusive. L’adéquation titre/contenu est correcte : le titre annonce un double programme avec deux intervenants, ce que la vidéo délivre effectivement. Aucun commentaire n’étant fourni, aucune analyse des tendances du public n’est formulée.

Le titre annonce un double programme avec deux intervenants sur un thème commun ; le contenu correspond effectivement à deux exposés (compositionnalité humain/IA par Feldman, autoréférence et métacognition par Schellenberg) suivis d'un dialogue. Adéquation correcte, bien que le titre soit purement descriptif et n'annonce pas le thème précis.

7/10

Présentation de résultats expérimentaux originaux issus d'un laboratoire universitaire reconnu (RuCCS, Rutgers), avec un protocole explicite (tâche GOHR, sujets Prolific, modèle RL A2C avec transformers, mesures de transfert simple-vers-composite). Les limites sont reconnues par l'orateur lui-même (comparaison biaisée entre sujet humain non naïf et IA blank slate, espace de paramètres non isomorphe). Cependant, la vidéo est une captation de séminaire sans données chiffrées complètes ni publication associée accessible dans la description, ce qui empêche toute vérification indépendante des résultats présentés.

Repères établis par PSI à partir de la transcription : le créateur n'a pas défini de chapitres.

• 00:00Introduction par les directeurs du RuCCS et présentation du format « double feature » avec dialogue entre deux intervenants.
• 03:00Jacob Feldman présente le contexte : comparer IA et humains sans le voile de la spéculation, en s'appuyant sur des données empiriques.
• 07:00Présentation du Game of Hidden Rules : classer des formes selon une règle inconnue, avec démonstration vidéo de jeu.
• 12:00Exemple de règle non triviale (ordre de lecture) illustrant la diversité des types de règles possibles.
• 18:00Typologie des règles : basées sur les caractéristiques, l'espace, les séquences, et possibilité de composition.
• 25:00Présentation des 18 règles fiduciaires classées par difficulté et courbes d'apprentissage des sujets humains.
• 35:00Détails du modèle IA : A2C avec transformers, environ 10^8 paramètres, blank slate, mesure du nombre de coups avant résolution.
• 45:00Comparaison des performances : 68 coups en moyenne pour les humains contre plus de 8 000 pour l'IA, rapport de 120 pour 1.
• 55:00Résultat central sur le transfert : décorrélation entre transfert simple-vers-composite chez les humains et chez l'IA.
• 1:10:00Intervention de Susanna Schellenberg sur l'autoréférence et la métacognition en IA.