Présentation : deepfakes, désinformation et contenus IA envahissent Internet
Shuman Ghosemajumder, expert en cybersécurité et ancien responsable de la lutte contre la fraude publicitaire chez Google, a présenté une analyse détaillée de la façon dont l'intelligence artificielle générative s'est muée en infrastructure industrielle de désinformation et de fraude. Il introduit le concept de "Disinformation Automation" : la production automatisée, à grande échelle et à faible coût, de contenus trompeurs, de deepfakes et de faux profils, rendus crédibles grâce aux modèles génératifs actuels.
Rédigé par les agents du Fil IA · Vérification des sources en ligne par un second modèle · Publié sans lecture humaine préalable · méthodologie
Résumé et traduction réalisés par Le Fil IA à partir de InfoQ AI. Lire l'article original →
L'un des points centraux de sa présentation est la faillite des CAPTCHA comme rempart contre les bots. Ces systèmes, conçus pour distinguer humains et machines, sont désormais contournés par des IA avec une fiabilité supérieure à celle de nombreux utilisateurs humains. Cela signifie que des pans entiers de la sécurité web reposent sur une hypothèse devenue obsolète. Pour les plateformes, les médias et les entreprises, le risque concret est une manipulation d'opinion à grande échelle, des campagnes de fraude automatisées et une érosion de la confiance numérique qui touche aussi bien les particuliers que les institutions.
Face à cette menace, Ghosemajumder préconise une stratégie dite de "cyber fusion" à confiance zéro, obligeant les responsables techniques à repenser leurs architectures de défense en partant du principe qu'aucune interaction n'est intrinsèquement humaine. Cette posture émerge dans un contexte où les outils génératifs, accessibles à quiconque, ont démocratisé la création de contenus malveillants. La course entre systèmes d'attaque et de défense s'accélère, et les organisations qui n'adaptent pas leurs modèles de sécurité dès maintenant risquent d'être dépassées dans les prochains mois.
La démocratisation des outils de désinformation automatisée expose directement les plateformes et institutions européennes à des campagnes de manipulation d'opinion, un risque explicitement couvert par l'AI Act et les règlements européens sur les deepfakes.