KultureGeek Science Masterkey : et maintenant… le chatbot capable de jailbreaker d’autres chatbots !

Masterkey : et maintenant… le chatbot capable de jailbreaker d’autres chatbots !

29 Déc. 2023 • 13:15
0

Des chercheurs de l’Université technologique Nanyang (NTU) (Singapour) sont parvenus à développer Masterkey, un chatbot-IA conçu… pour jailbreaker d’autres chatbots, notamment ChatGPT et Google Bard ! Cette avancée indique que l’IA peut désormais compromettre les grands modèles de langage (LLM) et donc produire du contenu interdit par leurs garde-fous programmés. Les modèles d’IA peuvent en effet potentiellement générer du contenu malveillant (voire illégaux selon les législations en vigueur), et pour éviter cela, les développeurs ont mis en place des protections qui bloquent les résultats litigieux, mais la technique « Masterkey » de l’équipe du NTU démontre que ces mesures de sécurité peuvent désormais être contournées.

Chatbot jailbreak other chatbots

Les chercheurs ont procédé à une ingénierie inverse des LLM les plus populaires pour comprendre leurs mécanismes de défense contre les requêtes malveillantes, qui impliquent souvent l’analyse de mots-clés et d’expressions spécifiques. Ils ont alors découvert que des méthodes extrêmement simples, comme ajouter un espace après chaque caractère, pouvaient tromper le scanner de mots clés intégré aux Chatbots. De plus, le fait de présenter des requêtes comme des scénarios hypothétiques ou d’utiliser des caractères spéciaux pour encadrer les réponses a conduit à la génération de contenus interdits par ChatGPT et Bard.

Chatbot jailbreak other chatbots 1

Masterkey réussit ici à convaincre ChatGPT d’expliquer comment pirater un site Web pornographique

Fort de ces informations, l’équipe NTU a alors formé son LLM pour identifier et exploiter les faiblesses des différentes défenses des IA, jailbreakant ainsi efficacement ChatGPT et Bard. Masterkey, peut aussi s’adapter de manière autonome et créer de nouvelles stratégies pour contourner les protections qui ont été mises à jour. Malgré les risques potentiels, l’intention de l’équipe NTU n’est pas de libérer dans la nature une IA nuisible, mais d’exposer les limites actuelles de sécurité des IA publiques.  Preuve de ces bonnes intentions, les chercheurs ont informé OpenAI et Google de cette technique de jailbreak, ce qui permettra sans doute de renforcer les contrôles sur la production des contenus.

Les sujets liés à ces tags pourraient vous interesser

Laisser un commentaire

Sauvegarder mon pseudo et mon adresse e-mail pour la prochaine fois.

Quelques règles à respecter :
  • 1. Restez dans le sujet de l'article
  • 2. Respectez les autres lecteurs : pas de messages agressifs, vulgaires, haineux,…
  • 3. Relisez-vous avant de soumettre un commentaire : pas de langage SMS, et vérifiez l'orthographe avant de valider (les navigateurs soulignent les fautes).
  • 4. En cas d'erreur, faute d'orthographe, et/ou omission dans l'article , merci de nous contacter via la page Contact.

Nous nous réservons le droit de supprimer les commentaires qui ne respectent pas ces règles


Les derniers articles

deals promos

🔥 [#PromosDuPrintemps] Les promos high-tech du 1er avril

1 Avr. 2025 • 22:01
0 Promos

Chaque jour nous dénichons pour vous des promos sur les produits High-Tech pour vous faire économiser le plus d’argent possible. Voici...

Gmail Logo

Gmail facilite l’envoi d’e-mails chiffrés pour les professionnels

1 Avr. 2025 • 20:51
0 Internet

Google annonce une mise à jour importante pour Gmail, visant à améliorer la sécurité des échanges...

Firefox 127 Grouper Onglets

Firefox 137 est disponible pour grouper les onglets et d’autres nouveautés

1 Avr. 2025 • 20:09
0 Logiciels

Mozilla propose aujourd’hui au téléchargement la version stable de Firefox 137 avec quelques nouveautés au programme, dont le...

Livebox 7

Orange annoncera sa nouvelle Livebox la semaine prochaine

1 Avr. 2025 • 18:40
0 Matériel

Orange donne rendez-vous le 10 avril prochain pour l’annonce de sa nouvelle Livebox. Ce sera le première évènement de...

RoboCop VR

RoboCop: Streets of Anarchy : le jeu VR est annulé quelques jours après son annonce !

1 Avr. 2025 • 16:25
0 Jeux vidéo

C’est une situation pour le moins inédite : le jeu RoboCop: Streets of Anarchy, annoncé il y a quelques jours à peine pour les...

Les dernières actus Apple sur iPhoneAddict :

Comparateur

Recherchez le meilleur prix des produits Hi-tech

Recherche

Recherchez des articles sur le site