Meta lance un modèle d'IA pour le codage avec 816 milliards de paramètres

Meta lance un modèle d'IA pour le code doté de 816 milliards de paramètres. Le Muse Spark Open est optimisé pour fonctionner sur deux Mac Studio M5 Ultra avec 512 Go de mémoire. Le modèle est distribué sous une licence aux conditions commerciales limitées.

Le Muse Spark Open compte 42 milliards de paramètres actifs et un contexte de 1 million de tokens. Il est nativement multimodal et offre des capacités pour des tâches complexes. Le modèle est distribué sous la Muse Model License, aux conditions commerciales limitées. Le partenariat avec Apple comprend la prise en charge de l'architecture de mémoire unifiée et l'utilisation du framework MLX. Le Muse Spark Open est proposé via des API sur des plateformes comme Baseten, Fireworks AI et Hugging Face. Il peut fonctionner sur des GPU NVIDIA, AMD et Intel. Il est gratuit, avec une licence d'usage commercial limité.

La plateforme optimisée est composée de deux Mac Studio M5 Ultra avec 512 Go de mémoire, ce qui permet au modèle d'exécuter des tâches lourdes sans surcharger le système. La licence commerciale limitée oblige les utilisateurs à passer par des API sur des plateformes comme Baseten, Fireworks AI et Hugging Face. Cela peut compliquer l'accès direct pour certains développeurs, mais garantit que le modèle soit utilisé de façon contrôlée. La date de lancement au Brésil n'a pas été communiquée, mais le modèle est déjà disponible sur d'autres marchés.

Auparavant, les modèles d'IA pour le code avaient moins de paramètres et un contexte limité, ce qui compliquait les tâches complexes. Le Muse Spark Open, avec 816 milliards de paramètres au total et 42 milliards actifs, parvient à gérer du code plus long et à maintenir des conversations plus étendues pendant la programmation. La version précédente de Meta, comme Llama 3, avait moins de capacités et était moins efficace pour les tâches logicielles.

La nouvelle version est également compatible avec des plateformes comme Amazon SageMaker JumpStart et Hugging Face, ce qui élargit son usage. La licence commerciale limitée peut gêner les équipes qui ont besoin de flexibilité, mais offre une sécurité pour un usage en entreprise. Cette nouveauté est liée au travail de NVIDIA pour accélérer les UDF de Spark avec des GPU, déjà publié sur le site. La disponibilité au Brésil n'a pas été confirmée, mais le modèle est disponible via des API.

Le Muse Spark Open change la façon dont les modèles d'IA gèrent le code en utilisant 816 milliards de paramètres dans une architecture MoE. Cela permet au modèle de traiter des informations à très grande échelle, en optimisant l'utilisation des ressources dans les tâches complexes. L'optimisation pour fonctionner sur deux Mac Studio M5 Ultra avec 512 Go de mémoire montre que Meta a pensé au matériel haut de gamme, en réduisant la charge de calcul.

La disponibilité via API sur des plateformes comme Baseten, Fireworks AI et Hugging Face est une étape importante pour intégrer le modèle dans les flux de travail existants. Le partenariat avec Apple et l'optimisation pour Apple Silicon renforcent la polyvalence du Muse Spark Open. L'absence de date de lancement au Brésil et le prix non communiqué sont des lacunes qu'il faudra combler.

Fiche technique

Prix et disponibilité

Texte rédigé avec l'IA à partir des sources citées et vérifié par les règles automatiques de la rédaction. Notre méthode

• #software
• #design