Aller au contenu principal
Import AI 458 : réflexions sur l'avenir et une histoire de singularité
SécuritéImport AI2h

Import AI 458 : réflexions sur l'avenir et une histoire de singularité

Résumé IASource uniqueImpact UE
Source originale ↗·
Import AI 458 : réflexions sur l'avenir et une histoire de singularité
▶ Voir sur YouTube

Jack Clark, co-fondateur d'Anthropic et auteur de la newsletter Import AI, a donné en 2026 une conférence à l'Institut d'éthique en IA de l'Université d'Oxford, en collaboration avec le Cosmos Institute. Intitulée "Explorer le futur ou se retrancher dans le présent", cette intervention s'appuie sur l'Epoch Capabilities Index (ECI), un indice qui agrège les performances des modèles sur plus de 40 benchmarks distincts. Clark y retrace les grandes étapes récentes : en mars 2023, une IA réussit l'examen du barreau américain ; en juillet 2024, des systèmes basés sur des grands modèles de langage décrochent une médaille d'argent aux Olympiades Internationales de Mathématiques, puis la médaille d'or en juillet 2025. La même année, des IA co-signent de nouvelles preuves mathématiques et Claude Mythos identifie des failles inédites dans des logiciels.

Face à cette accélération, Clark pose une question centrale : que fait-on de ce progrès ? Sa thèse est que l'IA ne peut pas être traitée comme une technologie ordinaire. Si le rythme actuel se maintient, des systèmes potentiellement capables de se perfectionner eux-mêmes pourraient voir le jour dans un horizon proche. Les individus comme les sociétés n'auraient alors que deux options : anticiper activement les transformations qui s'annoncent, ou les subir passivement en ignorant leurs implications. Les enjeux concrets sont immenses : distribution des bénéfices, gouvernance, arbitrages sur les usages. Ces choix se poseront bien avant que la technologie n'atteigne ses limites.

La conférence s'inscrit dans un débat qui s'intensifie depuis plusieurs années au sein de la communauté IA. Anthropic, co-fondée en 2021 par Clark avec Dario et Daniela Amodei, est positionnée depuis ses débuts sur la sécurité des systèmes avancés. L'ECI qu'il cite est produit par Epoch AI, un organisme de recherche indépendant qui surveille l'évolution des capacités des modèles dans le temps. La lecture de cette courbe provoque chez Clark ce qu'il décrit comme un sentiment de "vertige" : non pas parce que les chiffres sont abstraits, mais parce qu'il mesure concrètement ce qu'ils impliquent pour des pans entiers de l'économie et de la société. Le numéro 458 d'Import AI inclut également une nouvelle de fiction explorant à quoi pourrait ressembler une singularité positive, signe que les praticiens de l'IA eux-mêmes commencent à prendre au sérieux des scénarios longtemps relégués à la spéculation.

Impact France/UE

Les réflexions sur la gouvernance de l'IA avancée et la distribution de ses bénéfices, portées par des figures de référence comme Oxford et Anthropic, alimentent directement le débat européen sur la mise en œuvre de l'AI Act.

Dans nos dossiers

Vu une erreur factuelle dans cet article ? Signalez-la. Toutes les corrections valides sont publiées sur /corrections.

À lire aussi

Import AI 455 : automatiser la recherche en IA
1Import AI 

Import AI 455 : automatiser la recherche en IA

Jack Clark, cofondateur d'Anthropic et auteur de la newsletter Import AI, estime désormais qu'il existe une probabilité supérieure à 60 % qu'un système d'IA soit capable d'entraîner lui-même son successeur sans intervention humaine d'ici fin 2028. Cette projection, qu'il qualifie lui-même de "reluctante" tant ses implications lui semblent vertigineuses, repose sur l'analyse de publications scientifiques accessibles publiquement sur arXiv, bioRxiv et NBER, ainsi que sur les produits déployés par les laboratoires de pointe. Clark ne s'attend pas à ce que cela se produise en 2026, mais anticipe une preuve de concept, un modèle entraînant son successeur de bout en bout, d'ici un à deux ans, d'abord sur des modèles non-frontier avant d'atteindre les systèmes les plus avancés, bien plus coûteux à produire. L'un des indicateurs les plus frappants qu'il cite est le benchmark SWE-Bench, qui mesure la capacité des IA à résoudre de vrais problèmes GitHub : en 2023, Claude 2 n'obtenait que 2 % de réussite ; aujourd'hui, Claude Mythos Preview atteint 93,9 %, saturant pratiquement le test. Si cette trajectoire se confirme, l'impact serait sans précédent dans l'histoire technologique. L'automatisation de la recherche en IA signifierait que les cycles d'amélioration des modèles n'auraient plus besoin d'ingénieurs humains pour concevoir les architectures, sélectionner les données ou définir les objectifs d'entraînement. La vitesse de progression du domaine, déjà exponentielle, pourrait s'accélérer de manière difficilement prévisible. Pour les entreprises technologiques, les centres de recherche académiques et les gouvernements, cela pose la question de savoir comment maintenir un contrôle humain significatif sur des systèmes dont l'évolution échappe partiellement à la supervision traditionnelle. Clark souligne explicitement que la société n'est probablement pas prête pour les transformations qu'implique un tel basculement. Cette réflexion s'inscrit dans un contexte où la communauté IA débat depuis plusieurs années du concept de "takeoff", le moment où les systèmes deviendraient capables d'amélioration autonome et récursive. Longtemps considéré comme un scénario lointain ou spéculatif, ce seuil semble se rapprocher à mesure que les benchmarks de codage, de raisonnement et d'autonomie des agents progressent. Des acteurs comme OpenAI, Google DeepMind et Anthropic investissent massivement dans des agents capables d'enchaîner des tâches complexes sans supervision humaine. Clark prévient qu'une fois ce Rubicon franchi, les prévisions habituelles sur l'évolution de l'IA perdront leur pertinence, et annonce qu'il consacrera l'essentiel de 2026 à analyser les implications concrètes de ce scénario pour la société, l'économie et la gouvernance technologique mondiale.

UESi cette trajectoire se confirme d'ici 2028, les institutions européennes, Commission, Parlement et ENISA, devront réviser en urgence les cadres de gouvernance de l'AI Act pour couvrir des systèmes d'IA capables d'auto-amélioration récursive, un scénario non anticipé dans les textes actuels.

💬 2% à 93,9% sur SWE-Bench en deux ans, c'est le chiffre qui rend les 60% de Clark recevables, pas les gros titres sur le "takeoff". Ce qui me frappe, c'est que c'est lui qui lâche ça, cofondateur d'Anthropic, en précisant lui-même que ça lui semble vertigineux. Reste à voir si "entraîner son successeur" est une vraie rupture ou juste le prochain benchmark à saturer.

SécuritéOpinion
1 source
Import AI 452 : lois d'échelle pour la cyberguerre, automatisation par IA en hausse et énigme autour des prévisions de PIB
2Import AI 

Import AI 452 : lois d'échelle pour la cyberguerre, automatisation par IA en hausse et énigme autour des prévisions de PIB

Les systèmes d'intelligence artificielle progressent dans leur capacité à mener des cyberattaques à un rythme alarmant, selon une étude publiée par l'organisation de sécurité Lyptus Research. En analysant les performances des modèles frontières depuis 2019, les chercheurs ont mesuré un doublement des capacités offensives tous les 9,8 mois en moyenne, un rythme qui s'est encore accéléré à 5,7 mois pour les modèles sortis depuis 2024. Les derniers modèles évalués, GPT-5.3 Codex et Opus 4.6, atteignent un taux de réussite de 50 % sur des tâches qui demandent à des experts humains en sécurité offensive entre 3,1 et 3,2 heures de travail. L'étude s'appuie sur sept benchmarks reconnus, dont CyBench, CVEBench et InterCode CTF, complétés par un jeu de données inédit de 291 tâches calibrées par dix professionnels en cybersécurité offensive. Par ailleurs, une seconde étude menée conjointement par l'INSEAD et Harvard Business School sur 515 startups en forte croissance montre que les entreprises formées à l'intégration de l'IA dans leurs processus internes réalisent 12 % de tâches supplémentaires, sont 18 % plus susceptibles d'acquérir des clients payants et génèrent 1,9 fois plus de revenus que les entreprises non formées. Ces résultats posent des questions fondamentales sur la double nature des systèmes d'IA. Un modèle performant pour détecter des vulnérabilités dans du code à des fins défensives peut être retourné en outil d'attaque sans modification. C'est ce que les chercheurs de Lyptus désignent comme le problème de la machine universelle : chaque gain de capacité générale amplifie simultanément les risques dans des domaines sensibles, de la cybersécurité à la biologie en passant par la physique des hautes énergies. Concrètement, les meilleurs modèles actuels peuvent aujourd'hui automatiser l'équivalent d'une demi-journée de travail d'un expert en sécurité offensive. Sur le front économique, la même dynamique joue en faveur des entreprises qui s'approprient l'IA : les startups traitées dans l'expérience de l'INSEAD ont concentré leurs gains principalement sur le développement produit et la stratégie, avec une augmentation de 44 % des cas d'usage IA identifiés. Le rythme d'accélération documenté par Lyptus place les décideurs politiques dans une course contre la montre. Les modèles open-weight les plus récents, comme GLM-5, n'accusent qu'un retard de 5,7 mois sur la frontière des modèles propriétaires, ce qui signifie que des capacités offensives avancées se diffuseront rapidement hors de tout contrôle centralisé. La chronologie des modèles évalués, de GPT-2 en 2019 aux modèles de 2026 comme Opus 4.6 et Sonnet 4.6, illustre une trajectoire continue et sans rupture. Les enjeux dépassent la cybersécurité stricte : ils interrogent la gouvernance globale de l'IA, la réglementation des modèles open-source, et la capacité des États à anticiper des menaces dont la vitesse de développement dépasse celle des cadres législatifs existants.

UEL'accélération des capacités offensives des modèles IA pose un défi direct aux régulateurs européens : l'AI Act risque d'être structurellement dépassé par la diffusion rapide de modèles open-weight aux capacités de cyberattaque avancées, menaçant infrastructures critiques et cadres législatifs existants.

💬 Les lois d'échelle appliquées à la cyberguerre, c'est le truc qu'on préférerait ne pas voir confirmé par une étude sérieuse. Un doublement des capacités offensives tous les 5,7 mois sur les derniers modèles, ça veut dire que les cadres réglementaires comme l'AI Act sont obsolètes avant même d'entrer en vigueur. Et le pire, c'est que les modèles open-weight suivent la frontière avec moins de 6 mois de retard, donc aucun contrôle centralisé ne tiendra.

SécuritéOpinion
1 source
Construire une gouvernance et une sécurité axées sur les agents autonomes
3MIT Technology Review 

Construire une gouvernance et une sécurité axées sur les agents autonomes

Alors que les agents d'intelligence artificielle s'intègrent de plus en plus dans le fonctionnement quotidien des grandes entreprises, une nouvelle menace silencieuse se profile : le manque de gouvernance de ces systèmes autonomes crée des angles morts dangereux. Selon le rapport 2026 State of AI du Deloitte AI Institute, 74 % des entreprises prévoient de déployer des agents IA d'ici deux ans. Pourtant, seulement 21 % d'entre elles disposent d'un modèle de gouvernance mature pour superviser ces agents autonomes. Les dirigeants identifient la confidentialité des données et la sécurité comme leur première préoccupation (73 %), devant la conformité légale et réglementaire (50 %) et la supervision des capacités de gouvernance (46 %). Dans de nombreuses organisations modernes, les identités non humaines (systèmes, bots, agents) dépassent déjà en nombre les identités humaines, une tendance qui va s'accélérer brutalement avec l'essor de l'IA agentique. L'enjeu est concret et immédiat : un agent mal sécurisé peut être manipulé pour accéder à des systèmes sensibles, exfiltrer des données propriétaires ou exécuter des actions non autorisées à grande échelle. Sans un plan de contrôle centralisé, ce ne sont pas des expériences isolées qui échouent, mais des déploiements entiers qui dysfonctionnent de façon imprévisible. Andrew Rafla, associé au sein de la pratique Cyber de Deloitte, résume l'exigence minimale : être capable de répondre à la question "quel agent a fait quoi, au nom de qui, avec quelles données, sous quelle politique, et peut-on le reproduire ou l'arrêter ?" Si ces réponses ne sont pas évidentes, l'entreprise n'a pas de plan de contrôle fonctionnel, seulement une exécution non maîtrisée. La gouvernance est précisément ce qui transforme des pilotes impressionnants en cas d'usage industrialisables et sûrs. Ce défi n'est pas apparu du vide. L'accélération des déploiements d'IA depuis 2023 a conduit de nombreuses entreprises à intégrer des agents dans leurs processus sans adapter leurs cadres de sécurité, conçus à l'origine pour des utilisateurs humains. Les outils classiques de gestion des identités et des accès (IAM) ne sont pas pensés pour des entités autonomes capables d'agir en chaîne et à vitesse machine. Ce rapport, produit par Insights, la branche de contenu personnalisé du MIT Technology Review, illustre une prise de conscience croissante dans l'industrie : la course à l'adoption de l'IA agentique doit impérativement s'accompagner d'une infrastructure de contrôle robuste, au risque de voir les gains de productivité annulés par des incidents de sécurité à grande échelle.

UELe déficit de gouvernance des agents IA concerne directement les entreprises européennes soumises à l'AI Act, qui impose des obligations de traçabilité, de supervision humaine et de gestion des risques pour les systèmes autonomes classés à haut risque.

SécuritéActu
1 source
Vérification d’identité obligatoire sur Claude, l’erreur fatale d’Anthropic ?
4Le Big Data 

Vérification d’identité obligatoire sur Claude, l’erreur fatale d’Anthropic ?

Anthropic a introduit une procédure de vérification d'identité obligatoire pour accéder à certaines fonctionnalités de Claude, son assistant IA. Le processus repose sur la technologie de Persona Identities et exige une pièce d'identité officielle avec photo, passeport, permis de conduire ou carte nationale d'identité, ainsi qu'un appareil équipé d'une caméra, une capture en direct de type selfie pouvant être demandée. La vérification se déroule en moins de cinq minutes. Elle est déployée progressivement, et n'apparaît pas systématiquement à la connexion, mais peut surgir lors de l'accès à certaines fonctionnalités spécifiques. En cas de problème détecté, infractions répétées aux conditions d'utilisation, compte créé depuis une zone non prise en charge, utilisation par un mineur, le compte peut être suspendu à l'issue du processus. Cette décision place Anthropic dans une position délicate face à ses concurrents directs. Ni OpenAI avec ChatGPT, ni Google avec Gemini n'imposent une telle étape à leurs utilisateurs. Demander une pièce d'identité officielle crée un friction significative à l'onboarding, susceptible de faire fuir des utilisateurs vers des alternatives moins contraignantes. Pour les professionnels et entreprises, la question de la confidentialité se pose également : transmettre un document d'identité à un tiers, fût-il un prestataire certifié comme Persona, soulève des réticences légitimes, même si Anthropic affirme que les données collectées servent exclusivement à confirmer l'identité et ne seront jamais utilisées pour entraîner ses modèles. La décision s'inscrit dans une stratégie de conformité réglementaire et de prévention des abus que la compagnie de San Francisco défend depuis sa fondation autour du concept d'IA "constitutionnelle" et sûre. Anthropic justifie la mesure par la nécessité de savoir qui se trouve derrière l'écran, de faire respecter les règles d'utilisation et de répondre à des obligations légales croissantes, notamment dans un contexte où les régulateurs américains et européens scrutent de plus en plus les plateformes d'IA générative. La question qui se pose désormais est de savoir si cette approche, plus rigoureuse sur le plan éthique, constitue un avantage concurrentiel à long terme auprès des entreprises soucieuses de traçabilité, ou si elle handicape durablement l'adoption grand public de Claude face à des rivaux qui misent sur la facilité d'accès immédiate.

UELa mesure s'inscrit dans un contexte de durcissement réglementaire européen, et pourrait anticiper des exigences similaires imposées aux plateformes d'IA générative par l'AI Act ou les autorités comme la CNIL.

SécuritéOpinion
1 source

Recevez l'essentiel de l'IA chaque jour

Une sélection éditoriale quotidienne, sans bruit. Directement dans votre boîte mail.

Recevez l'essentiel de l'IA chaque jour