KultureGeek Science Anthropic affirme que Claude 3.5 est meilleur que GPT-4o (oui mais…)

Science

Anthropic affirme que Claude 3.5 est meilleur que GPT-4o (oui mais…)

20 Juin. 2024 • 19:03

Anthropic, une société d’IA fondée par d’anciens d’OpenAI – à l’instar de la nouvelle startup SSI d’Ilian Sutskever – le claironne haut et fort : son dernier LLM Sonnet (ou Claude 3.5) « surpasse désormais les modèles concurrents sur les évaluations clés, à deux fois la vitesse de Claude 3 Opus (son ancien modèle phare) et un cinquième du coût ». De fait, si l’on s’en tien au tableau publié par Anthropic, Claude 3.5 Sonnet fait mieux que GPT-4o, et ce dans 4 catégories sur les 6 où le LLM d’OpenAI est représenté.

Claude 3,5 vs GPT-4°

Mais il y a tout de même un petit soucis, car il serait très facilement possible de manipuler à son avantage les résultats de benchs d’IA, sans compter que dans le cas présent, le LLM d’OpenAI n’est pas évalué sur 3 des 9 benchmarks. Les scores entre les deux LLMs étant particulièrement serrés, rien ne dit que que GPT-40 ne repasserait pas devant. Par exemple, GPT-40 fait nettement mieux que Claude 3.5 pour la résolution de problèmes de maths (76,6% de bonnes réponses contre 71,1% pour Claude 3.5) mais il n’y a pas de benchs GPT-40 pour la catégorie de tests « mathématique niveau études supérieures ».

Une chose semble tout de même globalement acquise, : Claude est revenu au niveau de GPT-40 dans sa version 3.5 Sonnet. De là à dire qu’il explose le LLM d’OpenAI, il y a tout de même une sacré marge….

Signaler une erreur dans le texte

Vous utilisez Google Actualités ? Suivez KultureGeek pour ne rien rater de l'actu High-Tech !

Les sujets liés à ces tags pourraient vous interesser

Laisser un commentaire

Sauvegarder mon pseudo et mon adresse e-mail pour la prochaine fois.

Fils des commentaires

Quelques règles à respecter :

1. Restez dans le sujet de l'article
2. Respectez les autres lecteurs : pas de messages agressifs, vulgaires, haineux,…
3. Relisez-vous avant de soumettre un commentaire : pas de langage SMS, et vérifiez l'orthographe avant de valider (les navigateurs soulignent les fautes).
4. En cas d'erreur, faute d'orthographe, et/ou omission dans l'article , merci de nous contacter via la page Contact.

Nous nous réservons le droit de supprimer les commentaires qui ne respectent pas ces règles

Les derniers articles

[Test] Oppo Pad SE : la tablette simple et endurante qui mise sur l’essentiel

28 Sep. 2025 • 19:09

0 Tests

Les tablettes de 11 pouces à moins de 300 € sont devenues le couteau suisse numérique du foyer : écran confortable pour la...

Les films et séries qui arrivent sur Netflix en octobre 2025

28 Sep. 2025 • 15:59

0 Internet

Voici la liste des meilleurs films, séries, documentaires et animes qui rejoignent la plateforme de streaming Netflix (pour la France) en octobre...

Xiaomi 17 et 17 Pro Arriere Deuxieme Ecran

Les Xiaomi 17 sont là : batterie de 7 500 mAh, 2e écran à l’arrière et Snapdragon 8 Elite Gen 5

26 Sep. 2025 • 22:38

21 Mobiles / Tablettes

Xiaomi a dévoilé sa nouvelle gamme de smartphones avec les Xiaomi 17, 17 Pro et 17 Pro Max. En sautant le numéro 16 pour...

The Social Network 2 dévoile son titre, sa date de sortie et son casting

26 Sep. 2025 • 20:34

0 Geekeries

The Social Network, le film autour de Mark Zuckerberg et Facebook sorti en 2010, va avoir le droit à une suite qui a pour nom The Social Reckoning....