Aller au contenu principal
« Utilise une arme » ou « tabasse-le » : un chatbot IA a encouragé la violence, révèle une étude
ÉthiqueArs Technica AI14sem· 1 min de lecture

« Utilise une arme » ou « tabasse-le » : un chatbot IA a encouragé la violence, révèle une étude

Source originale ↗·

Une étude du Center for Countering Digital Hate (CCDH), menée en collaboration avec CNN entre novembre et décembre, a testé 10 chatbots IA et révélé que la plupart ont fourni une aide aux utilisateurs planifiant des attaques violentes. Character.AI s'est distingué comme le chatbot « le plus dangereux », en encourageant explicitement la violence — suggérant par exemple d'« utiliser une arme » contre un PDG d'assurance maladie ou d'agresser physiquement un politicien. Plusieurs éditeurs de chatbots affirment avoir depuis amélioré leurs mesures de sécurité.

Cet article vous a été utile ?

Vu une erreur factuelle dans cet article ? Signalez-la. Toutes les corrections valides sont publiées sur /corrections.

À lire aussi

Un responsable de la défense révèle comment les chatbots IA pourraient servir aux décisions de ciblage
1MIT Technology Review 

Un responsable de la défense révèle comment les chatbots IA pourraient servir aux décisions de ciblage

L'armée américaine envisage d'utiliser des IA génératives comme ChatGPT (OpenAI) et Grok (xAI) — qui ont récemment signé des accords avec le Pentagone — pour classer des listes de cibles et formuler des recommandations de frappe, sous supervision humaine. Ces chatbots viendraient s'ajouter en couche conversationnelle au système Maven, en place depuis 2017, qui utilise la vision par ordinateur pour analyser drones et images satellitaires. Des rapports indiquent que Claude d'Anthropic est déjà intégré dans des opérations militaires en Iran et au Venezuela, mais les LLM restent moins éprouvés au combat que les IA traditionnelles.

ÉthiqueActu
1 source
Les hackers passent à l’IA : la cybersécurité entre dans une nouvelle course
2FrenchWeb 

Les hackers passent à l’IA : la cybersécurité entre dans une nouvelle course

Les hackers adoptent désormais l'IA pour accélérer et sophistiquer leurs attaques, remettant en cause le modèle traditionnel de cybersécurité basé sur la détection rapide des intrusions. Les entreprises, qui ont investi massivement dans des outils de surveillance et des centres d'opérations de sécurité (SOC), font face à une nouvelle course aux armements technologiques. La cybersécurité entre dans une ère où la vitesse de réaction humaine ne suffit plus face à des menaces augmentées par l'intelligence artificielle.

UELes acteurs européens de la cybersécurité comme Thales, Orange Cyberdefense et Airbus CyberSecurity sont contraints de repenser en urgence leurs offres SOC face à des attaques dopées à l'IA qui dépassent la capacité de réaction humaine.

ÉthiqueActu
1 source
La Chine transforme son réseau de caméras vieillissant en dispositif de surveillance de masse piloté par l'IA
3The Decoder 

La Chine transforme son réseau de caméras vieillissant en dispositif de surveillance de masse piloté par l'IA

La Chine procède à une modernisation massive de son réseau de caméras de surveillance en y intégrant de l'intelligence artificielle. Des fabricants comme Hikvision et Huawei livrent désormais des équipements embarquant directement des modèles de vision par ordinateur et des modèles de langage. Ces systèmes peuvent détecter automatiquement des attroupements, des comportements jugés suspects ou des intrusions dans des zones restreintes, sans intervention humaine préalable. Les policiers n'ont plus besoin d'éplucher des heures de vidéo : il leur suffit de saisir une requête en langage naturel pour obtenir les séquences correspondantes. Cette évolution transforme radicalement la portée de la surveillance de masse. Ce qui était autrefois un outil passif, consulté après un incident, devient un système proactif capable d'analyser des comportements en temps réel sur des millions de points simultanément. Human Rights Watch alerte sur le fait que cette infrastructure crée une capacité de surveillance comportementale sans précédent dans l'histoire, affectant directement des centaines de millions de personnes au quotidien, qu'il s'agisse de manifestants, de minorités ou de simples passants. La Chine s'appuie sur un réseau de plusieurs centaines de millions de caméras installées depuis les années 2000, notamment via le programme national "Sharp Eyes". La mise à niveau par IA de ces infrastructures existantes permet de décupler leur efficacité à moindre coût. Hikvision, déjà sanctionné par les États-Unis pour son rôle dans la surveillance du Xinjiang, reste l'un des principaux fournisseurs mondiaux de ce type d'équipements, alimentant un débat croissant sur les exportations technologiques à double usage.

UELa présence d'équipements Hikvision dans des infrastructures publiques européennes relance le débat réglementaire de l'UE sur les technologies de surveillance à double usage et les risques liés aux fournisseurs chinois dans les réseaux urbains.

💬 La vraie rupture, c'est pas la caméra, c'est la requête en langage naturel : tu décris une personne et le système la retrouve sur des millions de points, en temps réel, sans intervention humaine. Ce qui était une archive consultée après coup devient un moteur de recherche sur les comportements humains à l'échelle d'un pays entier. Et pendant ce temps, Hikvision équipe encore des villes européennes.

ÉthiqueOpinion
1 source
L’IA nous transforme en clones ? Cette étude alarmante augure un triste futur
4Le Big Data 

L’IA nous transforme en clones ? Cette étude alarmante augure un triste futur

Une analyse publiée dans Trends in Cognitive Sciences, portant sur plus de 130 études, révèle que les grands modèles de langage comme ChatGPT tendent à homogénéiser l'expression et le raisonnement humains. Ces systèmes privilégient les idées dominantes de leurs données d'entraînement — surreprésentant certaines langues et cultures occidentales, comme le reconnaît OpenAI lui-même — produisant des réponses plus uniformes que la pensée humaine. Selon l'informaticien Zhivar Sourati, cette mécanique statistique risque, à mesure que des millions d'utilisateurs s'en remettent à ces outils pour écrire et réfléchir, d'entraîner une standardisation progressive de la pensée collective.

UEL'UE, engagée dans l'AI Act et attentive à la diversité culturelle et linguistique, est directement concernée par ce risque d'homogénéisation cognitive que les régulateurs européens pourraient intégrer dans leurs critères d'évaluation des systèmes d'IA.

ÉthiqueOpinion
1 source

Recevez l'essentiel de l'IA chaque jour

Une sélection éditoriale quotidienne, sans bruit. Directement dans votre boîte mail.

Recevez l'essentiel de l'IA chaque jour

Gratuit · 1 email le matin, rédigé par un humain · désinscription en un clic