Mise à jour du 11 novembre à 6 h UTC : Deux citations précédemment attribuées à Edward Snowden dans les derniers paragraphes ont été corrigées pour être attribuées à Illia Polosukhin.
Near Protocol a dévoilé un plan ambitieux pour construire le plus grand modèle d’intelligence artificielle open source au monde lors de la journée d’ouverture de sa conférence Redacted à Bangkok, en Thaïlande. Le modèle, comportant 1,4 trillion de paramètres, serait 3,5 fois plus grand que le modèle Llama actuel de Meta en open source.
Il sera créé grâce à la recherche et au développement compétitifs, issus de milliers de contributeurs sur le nouveau hub de recherche Near AI, permettant aux participants de rejoindre dès aujourd’hui, 10 novembre, l’entraînement d’un modèle de petite taille de 500 millions de paramètres.
Le modèle d’IA ambitieux de Near Protocol
Le projet évoluera en taille et en sophistication sur sept modèles, seuls les meilleurs contributeurs étant sélectionnés pour travailler sur des modèles de plus en plus complexes et volumineux. Les modèles seront monétisés et la confidentialité sera préservée via l’utilisation d’environnements d’exécution de confiance chiffrés pour récompenser les contributeurs et encourager les mises à jour constantes au fur et à mesure des avancées technologiques.
L’entraînement et le calcul coûteux seront financés par des ventes de tokens, a déclaré Illia Polosukhin, cofondateur de Near Protocol, à Cointelegraph lors de la conférence Redacted à Bangkok.
Illia Polosukhin, cofondateur de Near. Source : Cointelegraph
« Cela coûte environ 160 millions de dollars, donc c’est beaucoup, évidemment, mais en fait, dans la crypto, il est possible de lever cet argent », a-t-il dit. Polosukhin a ajouté :
« Ensuite, les détenteurs de tokens sont remboursés par toutes les inférences qui se produisent lorsque ce modèle est utilisé. Donc nous avons un modèle commercial, nous avons un moyen de le monétiser, nous avons un moyen de lever de l’argent et nous avons un moyen de mettre cela en boucle. Et ainsi les gens peuvent réellement réinvestir dans le prochain modèle également. »
Near est l’un des rares projets crypto avec la capacité de réaliser une telle entreprise ambitieuse : Polosukhin a été l’un des auteurs du document de recherche révolutionnaire sur les transformateurs qui a mené à ChatGPT, et le cofondateur Alex Skidanov travaillait chez OpenAI avant la sortie du modèle déterminant à la fin de 2022.
Skidanov, qui dirige maintenant Near AI, a concédé que c’est une tâche massive avec un obstacle de taille à surmonter.
L’IA décentralisée aborde les problèmes de confidentialité
Pour entraîner un modèle aussi grand, le projet aurait besoin de « dizaines de milliers de GPU en un seul endroit », ce qui ne serait pas idéal. Mais pour utiliser un réseau de calcul décentralisé « il faudrait une nouvelle technologie qui n’existe pas aujourd’hui car toutes les techniques d’entraînement distribué que nous avons nécessitent une interconnexion très rapide. » Cependant, il a ajouté que des recherches émergentes de Deep Mind suggèrent que c’est possible.
Alex Skidanov, cofondateur de Near. Source : Cointelegraph
Polosukhin a dit qu’il n’avait pas parlé avec des projets existants comme l’Artificial Superintelligence Alliance, mais serait heureux de voir s’il y a des synergies. Quoi qu’il en soit, il a dit que la technologie de l’IA décentralisée doit gagner pour notre bien à tous.
« C’est probablement la technologie la plus importante actuellement et probablement à l’avenir. Et la réalité est que, si l’IA est contrôlée par une entreprise, nous allons effectivement faire tout ce que cette entreprise nous dit », a-t-il expliqué, ajoutant :
« Si toute l’IA et effectivement toute l’économie sont contrôlées par une entreprise, il n’y a plus de décentralisation à ce moment-là. Donc, c’est en fait la seule façon pour que le Web3 reste pertinent, philosophiquement, si nous avons une IA qui suit aussi les mêmes principes. »
Le conférencier invité Edward Snowden a appuyé le message avec une représentation frappante de l’IA centralisée transformant le monde en un vaste État de surveillance.
Il a également parlé du besoin de droits civiques sur internet et de la nécessité de reconnaître « qu’il y a des limites légitimes à leur autorité de régulation, et la seule façon de préserver notre souveraineté numérique est de créer nos propres systèmes qui sont appliqués par les mathématiques. »