Microsoft travaille sur le développement de sa propre puce AI pour l’entraînement de grands modèles de langage (LLM) tels que ChatGPT et GPT-4, selon The Information. La société teste déjà les performances de la puce en utilisant des LLM avec certains employés de Microsoft et OpenAI, rapporte les sites de Reuters et Tom’s Hardware.
Actuellement, NVIDIA est le principal fournisseur de puces AI, et les entreprises cherchent à acheter des GPU NVIDIA. OpenAI, qui développe ChatGPT, a besoin de plus de 30 000 GPU NVIDIA A100 pour commercialiser ChatGPT. Cependant, les GPU NVIDIA H100 pour l’AI sont vendus à plus de 40 000 dollars sur eBay, ce qui montre la forte demande pour les puces haut de gamme pour l’IA (Intelligence Artificielle), selon The Verge.
Microsoft ne prévoit pas d’utiliser les puces AI de NVIDIA, mais plutôt de développer sa propre puce AI pour économiser sur les investissements dans les puces AI, selon The Information. Le projet, appelé “Athena”, est conçu pour entraîner des LLM et des logiciels similaires à partir de données d’inférence de modèles AI. La dernière version d’Athena est en cours de fabrication avec le processus 5 nm de TSMC. Il n’est pas clair si Microsoft proposera Athena aux clients de son service cloud Azure, mais il est possible qu’Athena soit largement disponible chez Microsoft et OpenAI dès 2024.
Microsoft a signé un partenariat à long terme avec OpenAI en janvier 2023, ce qui explique pourquoi OpenAI est impliqué dans le développement de la puce Athena. Il est également signalé que l’opération d’Athena a déjà commencé avec les derniers LLM tels que GPT-4.
Microsoft est un leader dans l’utilisation de l’AI pour Bing, les applications Office et GitHub, ce qui signifie que les avantages du développement de puces AI sont plus importants pour Microsoft que pour d’autres entreprises.
D’autres géants de la technologie tels que Google, Amazon et Meta ont également commencé à développer leurs propres puces AI. Cependant, Microsoft ne considère pas Athena comme un remplacement complet des GPU NVIDIA. En mars 2023, Microsoft a également collaboré avec NVIDIA sur “DGX Cloud”.
Microsoft travaille sur le développement de puces ARM depuis plusieurs années et Bloomberg a rapporté en 2020 que Microsoft envisageait de concevoir des processeurs ARM pour les serveurs. Bien que ces puces ARM ne soient pas encore disponibles, Microsoft travaille avec AMD et Qualcomm pour développer des puces personnalisées pour les ordinateurs portables Surface Laptop et Surface Pro X.
The Information avertit que le projet Athena pourrait ne pas aboutir, mais compte tenu du développement récent de l’AI générative et de la popularité de ChatGPT, il n’est pas surprenant que Microsoft continue de développer Athena. Tom’s Hardware a également souligné que le projet Athena pourrait être plus important que prévu.
Commentaires