KultureGeek Science Anthropic affirme que Claude 3.5 est meilleur que GPT-4o (oui mais…)

Anthropic affirme que Claude 3.5 est meilleur que GPT-4o (oui mais…)

20 Juin. 2024 • 19:03
0

Anthropic, une société d’IA fondée par d’anciens d’OpenAI – à l’instar de la nouvelle startup SSI d’Ilian Sutskever – le claironne haut et fort : son dernier LLM Sonnet (ou Claude 3.5) « surpasse désormais les modèles concurrents sur les évaluations clés, à deux fois la vitesse de Claude 3 Opus (son ancien modèle phare) et un cinquième du coût ». De fait, si l’on s’en tien au tableau publié par Anthropic, Claude 3.5 Sonnet fait mieux que GPT-4o, et ce dans 4 catégories sur les 6 où le LLM d’OpenAI est représenté.

Claude 3,5 vs GPT-4°

Mais il y a tout de même un petit soucis, car il serait très facilement possible de manipuler à son avantage les résultats de benchs d’IA,  sans compter que dans le cas présent, le LLM d’OpenAI n’est pas évalué sur 3 des 9 benchmarks. Les scores entre les deux LLMs étant particulièrement serrés, rien ne dit que que GPT-40 ne repasserait pas devant. Par exemple, GPT-40 fait nettement mieux que Claude 3.5 pour la résolution de problèmes de maths (76,6% de bonnes réponses contre 71,1% pour Claude 3.5) mais il n’y a pas de benchs GPT-40 pour  la catégorie de tests « mathématique niveau études supérieures ».

Une chose semble tout de même globalement acquise, : Claude est revenu au niveau de GPT-40 dans sa version 3.5 Sonnet. De là à dire qu’il explose le LLM d’OpenAI, il y a tout de même une sacré marge….

Les sujets liés à ces tags pourraient vous interesser

Laisser un commentaire

Sauvegarder mon pseudo et mon adresse e-mail pour la prochaine fois.

Quelques règles à respecter :
  • 1. Restez dans le sujet de l'article
  • 2. Respectez les autres lecteurs : pas de messages agressifs, vulgaires, haineux,…
  • 3. Relisez-vous avant de soumettre un commentaire : pas de langage SMS, et vérifiez l'orthographe avant de valider (les navigateurs soulignent les fautes).
  • 4. En cas d'erreur, faute d'orthographe, et/ou omission dans l'article , merci de nous contacter via la page Contact.

Nous nous réservons le droit de supprimer les commentaires qui ne respectent pas ces règles


Les derniers articles

Meta Facebook Logos

Meta critique l’Europe et ses « demandes aberrantes » pour les données de Facebook

26 Nov. 2025 • 17:05
0 Internet

Le bras de fer juridique entre Meta et la Commission européenne pour les données de Facebook prend une tournure personnelle devant la plus...

Pico presenta su nuevo visor RV Pico 4, una propuesta todo en uno, ligera y ergonómica

PICO lancera un nouveau casque XR en 2026 avec des écrans Micro-OLED 4K et une puce maison

26 Nov. 2025 • 15:31
0 Matériel

PICO, la marque XR du groupe ByteDance (l’éditeur de TikTok), s’apprête à lancer en 2026 un casque de...

Femme Passant Un Appel Avec Un Téléphone Portable

Il n’y a aucun lien entre le téléphone portable et le cancer, dit l’Anses

26 Nov. 2025 • 14:10
0 Mobiles / Tablettes

L’Agence nationale de sécurité sanitaire de l’alimentation, de l’environnement et du travail (Anses) vient de rendre un...

Kumma toy AI

L’ourson connecté Kumma revient sur les étals sans son IA NSFW

26 Nov. 2025 • 12:55
0 Matériel

Le fabricant singapourien FoloToy a remis en rayon son ourson connecté Kumma, un jouet présenté comme un compagnon ludique pour les...

Lockheed_Martin_X59

X-59 : la NASA dévoile les images du premier vol de son jet supersonique « silencieux »

26 Nov. 2025 • 11:35
0 Science

Nouvelle étape majeure pour l’aéronautique : la NASA a publié les images du tout premier vol du X-59, son démonstrateur...

Les dernières actus Apple sur iPhoneAddict :

Comparateur

Recherchez le meilleur prix des produits Hi-tech

Recherche

Recherchez des articles sur le site