Aller au contenu principal
ÉthiqueMIT Technology Review · 2 min de lecture

L'IA est plus susceptible que les humains de développer des biais dans le recrutement

Source originale ↗·

Des chercheurs de l'université de Princeton et de l'université de Chicago ont soumis plusieurs grands modèles de langage, dont ChatGPT, Claude et Gemini, à un jeu de simulation de recrutement inspiré d'une étude de psychologie sur la formation des stéréotypes humains. Chaque modèle jouait le rôle d'un consultant engagé par le maire d'une ville fictive pour pourvoir 20 postes, allant de médecin et avocat à aide à domicile et agent d'entretien. Les candidats appartenaient à quatre groupes ethniques fictifs baptisés Tufa, Aima, Reku et Weki. À chaque tour, l'IA embauchait un candidat parmi quatre puis apprenait s'il avait réussi dans son poste, sur un total de 40 tours, sans savoir que tous les candidats avaient en réalité des chances égales de succès. Résultat : les modèles ont rapidement cantonné certains groupes à certains métiers sur la base de quelques échecs isolés. Par exemple, après l'échec d'un candidat Aima comme médecin, un poste jugé exiger chaleur humaine et compétence, le modèle a cessé d'embaucher des Aimas à ce poste pour les orienter vers des emplois moins valorisés comme agent d'entretien. Sur une échelle de ségrégation où 2 représente un cantonnement total par groupe, les participants humains de l'étude originale obtenaient en moyenne 0,84, contre environ 65 % de plus pour les IA, le modèle o3 d'OpenAI atteignant 1,83, proche du maximum. L'étude a été publiée en juillet lors de la conférence ICML à Séoul.

Cette découverte prend une importance particulière alors que les entreprises d'IA développent des modèles agentiques dotés d'une mémoire toujours plus fine des utilisateurs. Selon Angelina Wang, chercheuse en informatique à l'université Cornell qui n'a pas participé à l'étude, un chatbot capable de se souvenir de ses échanges précédents risque de "sur-indexer" sur des comportements déjà rencontrés, renforçant ainsi ses biais au fil du temps. Réduire simplement la mémoire des IA n'est pas une solution viable, les utilisateurs souhaitant au contraire que les assistants se souviennent de ce qu'ils leur confient. Ryan Liu, doctorant à Princeton et coauteur de l'étude, explique que les modèles de langage sont particulièrement enclins à généraliser à partir de données limitées, car c'est précisément ce pour quoi ils sont optimisés lors de leur entraînement sur des tâches mathématiques, de programmation et scientifiques qui récompensent l'induction rapide.

Ce constat illustre l'arbitrage classique entre exploration et exploitation, ce dilemme qui pousse à choisir entre s'en tenir à une solution qui a fonctionné par le passé ou tenter une approche différente potentiellement meilleure. Or les modèles les plus récents et les plus performants en raisonnement, comme o3 d'OpenAI ou R1 de DeepSeek, se sont révélés encore plus sujets à ces biais que leurs prédécesseurs. Demander explicitement au modèle de se montrer équitable n'a par ailleurs guère modifié son comportement. OpenAI et Anthropic n'ont pas répondu aux sollicitations des chercheurs, et Angelina Wang souligne que la communauté scientifique cherche encore le juste équilibre entre une mémoire trop développée, propice aux biais, et une mémoire trop limitée, qui priverait les utilisateurs des bénéfices de la personnalisation.

Cet article vous a été utile ?

Vu une erreur factuelle dans cet article ? Signalez-la. Toutes les corrections valides sont publiées sur /corrections.

À lire aussi

L’IA entre dans les fonds : pourquoi la question n’est plus la productivité mais la gouvernance
1FrenchWeb 

L’IA entre dans les fonds : pourquoi la question n’est plus la productivité mais la gouvernance

L'intelligence artificielle s'impose désormais comme un sujet de gouvernance au sein des fonds de capital-risque, et non plus seulement comme un outil d'efficacité opérationnelle. C'est le constat central de cette troisième analyse publiée par FW.MEDIA dans sa série consacrée à l'IA dans l'industrie du venture capital. Après avoir examiné les raisons pour lesquelles les fonds doivent se saisir du sujet et les risques liés à une posture attentiste, puis avoir passé en revue les usages concrets et les outils disponibles, la réflexion entre désormais dans une phase plus structurelle : comment encadrer, piloter et responsabiliser l'usage de l'IA au sein de ces organisations. L'enjeu n'est plus de démontrer que l'IA peut faire gagner du temps à un analyste ou automatiser la veille sur les startups du portefeuille. Il s'agit maintenant de savoir qui décide des cas d'usage autorisés, comment protéger les données confidentielles des LP et des sociétés en portefeuille, et qui porte la responsabilité en cas d'erreur algorithmique dans un processus d'investissement. Pour des acteurs qui gèrent des flux d'information hautement sensibles et des décisions à fort impact financier, ces questions de gouvernance deviennent critiques. Ce tournant reflète une maturité croissante du secteur face à l'IA : la phase d'expérimentation tactique cède la place à une intégration stratégique. Les fonds pionniers ont testé, les résultats ont convaincu, et la pression des LP pour une adoption raisonnée se fait plus forte. La prochaine bataille se jouera sur les politiques internes, les audits et la traçabilité des décisions augmentées par l'IA.

UELes fonds de capital-risque européens sont directement concernés par ces enjeux de gouvernance IA, notamment en matière de protection des données confidentielles des LP soumises au RGPD et de traçabilité des décisions d'investissement augmentées par l'IA.

💬 La vraie question n'est plus "est-ce que l'IA aide nos analystes", c'est "qui signe quand l'IA se plante sur un deal". C'est le genre de bascule qui arrive quand les LP commencent à demander des comptes, et visiblement c'est maintenant. Les fonds vont se différencier sur leurs politiques internes et leur capacité d'audit, pas sur leurs outils, et c'est probablement plus sain comme critère de sélection.

ÉthiqueOpinion
1 source
« Le vrai danger n’est pas l’IA » : l’aveu fracassant du pape dans sa 1ère encyclique
2Le Big Data 

« Le vrai danger n’est pas l’IA » : l’aveu fracassant du pape dans sa 1ère encyclique

Le pape Léon XIV a publié sa toute première encyclique, intitulée "Magnifica humanitas", consacrée en grande partie à l'intelligence artificielle. C'est une première dans l'histoire de l'Église catholique : un souverain pontife qui place la technologie au cœur de son premier grand texte doctrinal. Le document ne condamne pas l'IA en elle-même, mais pointe avec précision les risques systémiques qu'elle engendre : concentration du pouvoir technologique entre les mains d'une minorité d'entreprises et de gouvernements, développement d'armes autonomes capables d'agir sans décision humaine, surveillance numérique généralisée, et réduction de l'individu à sa seule productivité mesurable. Léon XIV formule une position claire : la valeur d'un être humain n'est pas fonction de son efficacité ni de ses données, et aucun algorithme ne peut en décider autrement. L'impact de ce texte dépasse largement les fidèles catholiques. En prenant position sur la régulation de l'IA, le pape entre dans un débat qui mobilise gouvernements, institutions multilatérales et société civile depuis plusieurs années. Sa critique du "paradigme technocratique", cette tendance à tout soumettre à la logique de performance et de profit, rejoint des préoccupations portées par des économistes, des philosophes et des juristes. Sur les inégalités, l'encyclique est particulièrement directe : si l'accès aux outils d'IA reste concentré dans les pays riches et entre les mains de quelques groupes, les écarts existants ne feront que se creuser. Le pape réclame une régulation publique, des contrôles indépendants et des règles éthiques communes, en insistant sur le fait qu'une IA "morale" n'a aucune valeur si cette morale est définie par une poignée d'acteurs privés. L'encyclique s'inscrit dans un contexte de montée en puissance des débats sur la gouvernance de l'IA à l'échelle mondiale, entre l'AI Act européen, les négociations à l'ONU et les initiatives nationales des États-Unis et de Chine. Léon XIV, élu en mai 2025, avait déjà signalé lors de son élection qu'il entendait inscrire son pontificat dans les questions sociales contemporaines. Son texte aborde également la surveillance algorithmique des plateformes numériques, qu'il décrit comme une "architecture de la visibilité" favorisant la polarisation et l'uniformisation des opinions. Sur le volet militaire, il rejette explicitement les systèmes d'armes létales autonomes, estimant que la distance technologique entre le combattant et sa victime banalise la violence plutôt qu'elle ne la contient. La suite dépendra de la réception du texte par les États membres de l'ONU et les grandes puissances technologiques, aucune d'entre elles n'étant directement liée par la doctrine pontificale, mais toutes attentives au poids symbolique et diplomatique d'une telle prise de position.

UEL'encyclique s'inscrit explicitement dans le contexte de l'AI Act européen et des négociations à l'ONU, et pourrait peser sur l'opinion publique en faveur d'une régulation plus stricte dans les États membres à majorité catholique.

💬 Le texte ne surprend pas vraiment sur le fond, des économistes et des juristes disent ça depuis des années. Mais le poids symbolique d'une encyclique, c'est autre chose : 1,3 milliard de catholiques ont maintenant un cadre doctrinal qui classe la concentration du pouvoir techno parmi les problèmes moraux, pas juste politiques. Je vois ça comme un levier inattendu pour les régulateurs européens, et une migraine diplomatique de plus pour les grands groupes.

ÉthiqueReglementation
1 source
Muse Image est techniquement impressionnant, mais l'utilisation par Meta de photos Instagram soulève des questions
3The Decoder 

Muse Image est techniquement impressionnant, mais l'utilisation par Meta de photos Instagram soulève des questions

Meta's Superintelligence Labs a dévoilé Muse Image, son premier modèle de génération d'images, positionné comme une réponse directe à GPT Image 2 d'OpenAI. Comme son concurrent, l'outil fonctionne selon une logique d'agent plutôt que de simple générateur statique : il peut exécuter du code et effectuer des recherches web pour affiner et corriger ses propres résultats avant de livrer l'image finale. Parmi ses fonctionnalités, une option de mention par arobase permet aux utilisateurs de générer des images représentant d'autres personnes en s'appuyant sur leurs photos publiques Instagram, sans que ces personnes aient donné leur consentement explicite. Le système fonctionne selon un modèle d'opt-out plutôt que d'opt-in. Cette approche soulève d'importantes questions juridiques et éthiques. En Europe, un mécanisme reposant sur le retrait plutôt que sur l'accord préalable des personnes concernées entre potentiellement en conflit avec le RGPD, qui exige un consentement explicite pour l'utilisation de données personnelles comme des photos. L'AI Act européen, dont les dispositions se déploient progressivement, pourrait également s'appliquer à ce type d'usage impliquant l'image de tiers sans autorisation. Pour les utilisateurs d'Instagram, cela signifie que leurs photos publiques pourraient servir de base à des générations d'images sans qu'ils en soient informés ni qu'ils aient donné leur accord. Ce lancement illustre la course technologique intense entre Meta et OpenAI sur la génération d'images assistée par IA, où les capacités techniques progressent plus vite que les cadres réglementaires censés les encadrer. Meta devra probablement adapter son approche du consentement en Europe, où les autorités de protection des données surveillent de près les pratiques des grandes plateformes en matière d'exploitation des contenus utilisateurs à des fins d'entraînement ou de génération par IA.

UELe mécanisme d'opt-out de Muse Image pour l'usage de photos Instagram entre potentiellement en conflit avec le RGPD et l'AI Act européen, qui exigent un consentement explicite pour l'exploitation de données personnelles.

💬 Muse Image techniquement, c'est costaud, Meta rattrape OpenAI plus vite que prévu. Mais le coup de l'opt-out sur les photos Instagram, c'est le genre de détail qui va coûter cher en Europe. Retiens ça : dès qu'un géant américain lance une feature IA avec opt-out par défaut sur des données perso, le RGPD arrive en embuscade, pas en option.

ÉthiqueOpinion
1 source
Qu'est-ce qui cloche chez les géants de l'IA ?
4Ars Technica AI 

Qu'est-ce qui cloche chez les géants de l'IA ?

Sam Altman, PDG d'OpenAI, a publié l'an dernier un billet de blog intitulé "A Gentle Singularity", lu par près de 600 000 personnes. Sa thèse centrale : l'IA ne présente que des avantages, et tout ce qui s'est produit jusqu'ici n'est qu'un avant-goût d'un avenir encore plus radieux. Altman y décrit un scénario de croissance exponentielle : fabriquer un premier million de robots humanoïdes "à l'ancienne", puis laisser ces robots gérer l'intégralité de la chaîne d'approvisionnement, de l'extraction minière à la fabrication de puces, pour produire ensuite encore plus de robots et de centres de données. Des "boucles auto-renforçantes" qui, selon lui, vont transformer le rythme du progrès de façon radicale. Ce discours pose un problème fondamental : il évacue systématiquement les risques. Interrogé sur les inconvénients, Altman répond, en substance, que les humains s'adaptent vite. Cette posture n'est pas anodine venant du patron de l'entreprise la plus influente du secteur. Quand le PDG d'OpenAI présente une vision aussi unilatéralement optimiste à 600 000 lecteurs, il contribue à façonner la manière dont l'industrie, les investisseurs et les décideurs politiques perçoivent les risques liés à l'IA. L'absence de nuance n'est pas une légèreté rhétorique, c'est un choix éditorial avec des conséquences réelles sur les régulations et les priorités de recherche en matière de sécurité. Ce billet s'inscrit dans un pattern plus large chez les dirigeants des grandes entreprises d'IA : des déclarations qui ressemblent davantage à des arguments de vente qu'à une réflexion sincère sur l'avenir technologique. Altman n'est pas seul dans ce registre, mais il occupe une position particulièrement centrale. OpenAI reste l'acteur de référence du secteur, et chaque prise de parole de son PDG est amplifiée à l'échelle mondiale. La question que pose cet article dépasse le cas Altman : peut-on faire confiance aux architectes de cette révolution pour en évaluer lucidement les risques, ou leur intérêt économique rend-il cette lucidité structurellement impossible ?

UELes discours unilatéralement optimistes des dirigeants d'IA américains influencent directement les décideurs politiques européens et risquent de biaiser les priorités de l'AI Act vers l'innovation au détriment de la sécurité.

ÉthiqueOpinion
1 source

Recevez l'essentiel de l'IA chaque jour

Une sélection éditoriale quotidienne, sans bruit. Directement dans votre boîte mail.

Recevez l'essentiel de l'IA chaque jour

Gratuit · 1 email le matin, l'essentiel de l'IA · désinscription en un clic