NEW Open Source Qwen? BEATS GLM 5.2 & Claude? 🧐 Ornith 397B TESTED

Valeur des informations & solidité de l’argumentation

La valeur informative réside dans la démonstration pratique des capacités d’Ornith sur des tâches concrètes de génération de code, mettant en évidence des forces (vitesse, certains résultats visuels) et des faiblesses (boucles, sur-intelligence sur certains prompts). L’argumentation repose sur des exemples précis, mais elle manque de rigueur statistique : les tests sont effectués avec des seeds aléatoires et un petit nombre d’essais. Le créateur exprime des soupçons sur les benchmarks d’Ornith, mais sans preuve formelle. La comparaison avec d’autres modèles est utile, mais la méthodologie est informelle.

Rigueur scientifique, qualité des sources, adéquation du titre

La rigueur scientifique est limitée : les tests ne suivent pas un protocole établi, et les conclusions sont basées sur des impressions personnelles. Les sources citées sont principalement des liens vers la page Hugging Face du modèle et des vidéos compagnes, mais aucun article scientifique ni documentation technique détaillée. Le titre est fidèle au contenu, mais les affirmations de performance sont critiquées dans la vidéo. La licence du modèle est remise en question, et la description mentionne des liens affiliés, ce qui peut biaiser la neutralité. Globalement, l’adéquation titre/contenu est bonne, mais la crédibilité est affaiblie par le manque de transparence et de méthode.

Le titre reflète bien le contenu : test du modèle Ornith 397B, en le comparant à d'autres modèles, avec mention de ses performances annoncées.

5/10

Test pratique basé sur des prompts variés, mais avec des critiques sur la dissimulation de benchmarks et des problèmes de licence. La rigueur est limitée par l'absence de méthodologie formelle et l'usage de cas anecdotiques.

Repères établis par PSI à partir de la transcription : le créateur n'a pas défini de chapitres.

• 00:00Introduction et présentation des benchmarks d'Ornith vs GLM 5.2
• 01:00Test vision : génération d'un chat 3D en HTML
• 03:00Test mathématiques : boucle de raisonnement sur un problème
• 05:00Test Minecraft : génération d'un clone jouable
• 07:00Test Flappy Bird : visualisation 3D avec bugs de collision
• 09:00Test Word : interface améliorée mais font non modifiable
• 11:00Test génération de planètes 3D : résultat esthétique réussi
• 13:00Test reconnaissance musicale : erreur sur l'artiste de 'Remember the Name'
• 15:00Test divers : piano, voiture, ville procédurale, sort algorithmique en C++

• Page Hugging Face pour Ornith-1.0-397B — Référence au modèle testé et à sa fiche descriptive.
• Inferencer App — Outil utilisé pour tester le modèle.
• Vidéo sur GLM 5.2 — Vidéo compagnon mentionnée pour comparaison.
• Vidéo sur Kimi K2.7 Code — Vidéo compagnon mentionnée pour comparaison.
• Vidéo sur MTP AI Harness — Vidéo compagnon mentionnée.

• Page Hugging Face d'Ornith — Source directe du modèle, ses poids et sa documentation.

• Benchmarks de GLM 5.2 — Ornith affirme battre GLM 5.2 dans ses benchmarks, mais la vidéo note que les benchmarks de GLM sont omis dans la comparaison, jetant un doute sur la supériorité annoncée.

• vtudio.com