Quand NVIDIA et Intel Capital parient en même temps sur un projet de « formation d’IA décentralisée », le signal mérite qu’on s’arrête deux secondes.
Prime Intellect vient d’achever une levée de fonds de 13 millions de dollars en série A. Parmi les investisseurs figurent NVIDIA et Intel Capital : deux géants qui, en matière de puissance de calcul et d’influence, n’ont justement pas de quoi manquer d’atouts. Pourtant, ils choisissent de miser sur une équipe qui veut redistribuer le pouvoir de la formation.
Ce qu’elle fait est très direct : rendre interopérable l’entraînement distribué à travers plusieurs clusters, afin que les chercheurs, les fournisseurs de puissance de calcul et les financeurs puissent collaborer pour entraîner des modèles open source de pointe, tout en partageant la propriété et les revenus liés à ces modèles. Autrement dit, au lieu que quelques grandes entreprises monopolisent des modèles fermés, on permet à ceux qui apportent des GPU, à ceux qui écrivent le code et à ceux qui financent de co-détenir une IA ouverte.
Ce qui m’intéresse davantage, ce sont les motivations des géants. Le pari de NVIDIA sur l’entraînement décentralisé, c’est, dans une certaine mesure, un soutien à la voie de « l’infrastructure de calcul en réseau » : à l’avenir, les GPU disponibles à travers le monde pourraient réellement être organisés pour exécuter des tâches d’entraînement à plusieurs milliards (voire mille milliards) de paramètres.
Dans la narration de la filière DeAI, on passe discrètement de « faire sa monnaie en profitant d’un concept » à « faire tourner tout le processus d’entraînement ».
#DeAI #去中心化AI #PrimeIntellect