Dix mois. C'est le temps qu'il a fallu à LMArena pour transformer un tableur de votes de geeks en licorne à 3,1 milliards de dollars. Le tour : 200 millions levés, menés par Lightspeed et Khosla Ventures. Sur le papier, on finance un classement de modèles d'IA. Dans les faits, on vient d'acheter le chronométreur de la course — et on l'a acheté à ceux qui courent.
Un arbitre payé par les joueurs
LMArena, c'est le Chatbot Arena. Né en 2023 dans un labo de Berkeley, le LMSYS, propulsé par des millions de clics anonymes : on t'affiche deux modèles sans nom, tu votes pour celui qui te plaît le plus, une note sort. Pas de benchmark, pas de maths, du feeling. Vendeur, mais honnête.
Sauf que la blague a un goût. Khosla Ventures a misé sur OpenAI dès l'amorçage. Lightspeed a misé tôt sur Mistral. Les deux fonds qui financent l'arbitre possèdent déjà des chevaux dans la course qu'il arbitre. Juridiquement, personne ne dira rien. Éthiquement, c'est le structure exacte qui rend un classement inutilisable comme preuve — et parfait comme argument marketing.
« Détecter le mensonge » : le pitch qui fait vendre
La nouveauté, paraît-il, c'est qu'on va mesurer l'alignement. Notamment le mensonge. Sur une plateforme dont la pondération n'est pas auditable, l'échantillon pas contrôlé, et le client... le labo lui-même. Vous voulez un score de sincérité délivré par une société qui vend des évaluations privées à ceux qu'elle évalue ? Audacieux. On se croirait à un contrôle sanitaire payé par le restaurant.
Le vote gratuit, revendu au prix fort
Des millions d'humains ont cliqué, comparé, tranché. Gratuitement. Ces gens-là n'ont pas touché un centime des 200 millions et ne verront jamais la valo grimper. Le crowdsourcing dans toute sa splendeur : vous fabriquez la donnée, un fonds encaisse la plus-value. Suivez l'argent — il ne part pas dans votre direction.
Goodhart s'invite au tableau
Quand une métrique devient un objectif, elle cesse d'être une métrique. Ça vaut pour le PIB, ça vaut pour Elo. Les labos ont déjà testé des variantes anonymes dans l'arène pour tâter leur score. Un classement dont on parle dans les levées de fonds n'est plus un thermomètre : c'est un panneau publicitaire, et on optimise le panneau.
Ce qu'on ne vous dit pas
Pas d'audit indépendant. Pas de méthodologie ouverte de bout en bout. Aucun garde-fou annoncé sur les conflits d'intérêts. En échange : 3,1 milliards pour une moyenne pondérée de préférences humaines, dont une bonne part juge la longueur, le ton et les puces autant que le raisonnement. Le « juge de l'IA » juge surtout le style.
Lightspeed, Khosla : vous investissez où vous voulez, c'est votre métier. Mais ne vendez pas au monde un référé maison en gardant les parts des deux équipes. Et à LMArena : vous vouliez être l'arbitre. Un arbitre, ça se paie pour siffler. Ça ne se vend pas à la mi-temps.