
AI Evals : Intelligence prouve que le « goût » et le RLHF créatif remplacent les benchmarks automatisés
La startup Intelligence, éditrice de la plateforme Design Arena, a bouclé le 3 août 2026 une levée de fonds d'amorçage de 7,9 millions de dollars, menée par Index Ventures avec la participation de Valkyrie, de Conviction (portée par Sarah Guo et Mike Vernal) et de A*. Fondée en 2025 par Grace Li et Kamryn Ohly, l'entreprise est née d'un constat simple : les algorithmes actuels peinent à concevoir des interfaces ou des jeux réellement plaisants à utiliser. En six mois, avec une équipe de dix personnes seulement, Intelligence affirme être passée de 5 à 60 millions de dollars de revenus annuels récurrents (ARR), tout en rassemblant 5,5 millions d'utilisateurs dans plus de 190 pays, selon les chiffres communiqués par Grace Li sur X. Ce succès repose sur Design Arena, un outil qui fait évaluer par des humains, via des comparaisons A/B à l'aveugle, des rendus visuels et des maquettes web générés par différents modèles d'IA, sans révéler lequel les a produits. Les votes alimentent un classement dynamique basé sur le système Elo, la même logique que celle popularisée par les tests d'aveugle documentés sur le blog de LMSYS Org pour comparer les chatbots.
Cette approche répond à une impasse que rencontrent aujourd'hui les laboratoires de Machine Learning : les métriques automatisées classiques, comme la perplexité pour le texte ou les scores FID et CLIP pour l'image, atteignent un plafond de verre qualitatif. Le score CLIP, par exemple, mesure la cohérence sémantique entre un texte et une image, mais reste incapable de juger la finesse d'une interface utilisateur, son ergonomie ou son attrait émotionnel. Des équipes entières peuvent ainsi produire des modèles techniquement conformes aux benchmarks, sans parvenir à générer des produits réellement désirables sur le marché. Le Hugging Face Blog a lui-même souligné que les classements statiques fondés sur des métriques automatisées sont particulièrement vulnérables à la manipulation et au surentraînement. En transformant le jugement esthétique subjectif de millions d'utilisateurs en données quantifiables, Intelligence offre aux directeurs des données et aux équipes produit un signal fiable pour orienter le développement de leurs modèles visuels et applicatifs. Pour les grands laboratoires d'IA, payer pour accéder à ce goût collectif devient une nécessité stratégique autant qu'un argument commercial.
L'intégration du feedback humain dans l'entraînement des modèles n'est pas une nouveauté : l'apprentissage par renforcement à partir des préférences humaines (RLHF) a servi de fondation à l'alignement des grands modèles de langage, comme le documentent depuis plusieurs années les publications de recherche d'OpenAI. Ce qui change avec Intelligence, c'est l'extension de ce principe au design visuel et à l'expérience produit, un champ que l'écosystème commence à désigner sous le terme de RLHF créatif. Cette évolution intéresse directement les Frontier Labs, ces laboratoires qui développent les modèles d'IA les plus avancés, mais aussi les éditeurs de logiciels d'entreprise, confrontés à la nécessité d'aligner leurs outils génératifs sur des standards de qualité visuelle et ergonomique, et non plus seulement sur des critères mathématiques abstraits. À mesure que la génération d'interfaces, de sites web ou d'applications par l'IA se banalise, la capacité à mesurer objectivement ce qui plaît réellement aux utilisateurs devient un avantage concurrentiel décisif. Reste à savoir si ce modèle de goût industrialisé tiendra face à la diversité culturelle des usages, et si d'autres acteurs tenteront de répliquer la formule d'Intelligence pour capter une part de ce marché naissant de l'évaluation humaine à grande échelle.
Dans nos dossiers
Vu une erreur factuelle dans cet article ? Signalez-la. Toutes les corrections valides sont publiées sur /corrections.




