L’entreprise affirme que Llama 3.1, un modèle d’IA open source, surpasse les meilleurs modèles propriétaires dans de nombreux tests importants. Cette version pourrait faire pencher la balance en faveur du développement open source et représente un tournant majeur pour le secteur de l’IA.
Le modèle phare a 405 milliards de paramètres de puissance
Des modèles de différentes tailles font partie de la famille Llama 3.1, la version phare de 405 milliards de paramètres étant le modèle de base le plus grand et le plus puissant accessible au public à ce jour. Selon Meta, ce modèle fonctionne au même rythme ou mieux que des modèles à source fermée tels que GPT-4o et Claude 3.5 Sonnet sur une variété de tâches.
Le PDG de Meta, Mark Zuckerberg, a exprimé sa confiance dans le potentiel du modèle et a prédit que d’ici la fin de l’année, Meta AI, qui s’appuie sur Llama 3.1, dépassera ChatGPT en tant qu’assistant IA le plus populaire. Cette affirmation audacieuse souligne l’engagement de Meta dans la recherche sur l’IA open source et sa confiance dans le potentiel du modèle.
Photo : Méta
Photo : Méta
Photo : Méta
Le développement de Llama 3.1 a nécessité un investissement financier important. Plus de 16 000 GPU H100 de Nvidia ont été utilisés par Meta pour la formation ; les experts du secteur estiment que le coût total s’élève à des centaines de millions de dollars. Sous réserve d’exigences d’utilisation spécifiques, Meta met le modèle à la disposition des universitaires et des développeurs, même après cette dépense substantielle.
Photo : Méta
Fonctionnalités améliorées : prise en charge multilingue et contexte étendu
Par rapport à ses prédécesseurs, Llama 3.1 présente un certain nombre d’améliorations notables. Le modèle peut analyser et produire des séquences de texte plus volumineuses puisqu’il prend en charge une longueur de contexte de jeton de 128 Ko. Avec la prise en charge de huit langues, dont le français, l’allemand, l’hindi, l’italien et l’espagnol, il offre également des capacités multilingues améliorées. Grâce à ces caractéristiques, Llama 3.1 peut être utilisé pour une variété de tâches, telles que les assistants de codage, les robots conversationnels multilingues et les résumés de texte longs.
La publication de Llama 3.1 en tant que modèle open source par Meta s’inscrit dans un plan plus vaste visant à démocratiser les technologies d’IA. Meta fournit les pondérations du modèle en téléchargement, ce qui permet aux développeurs de modifier complètement le modèle pour l’adapter à leurs propres besoins et utilisations. Cette méthodologie s’oppose aux modèles à code source fermé mis à disposition par des organisations telles qu’OpenAI et Anthropic, qui limitent généralement l’accès aux API.
La conception open source de Llama 3.1 a des ramifications importantes pour la communauté de l’IA. Elle rend le modèle étudiable, modifiable et extensible pour les universitaires et les créateurs de sites Web, ce qui peut stimuler davantage l’innovation dans le secteur. Meta soutient que par rapport aux alternatives à code source fermé, cette stratégie entraînera une évolution plus rapide des modèles d’IA.
Meta a travaillé avec plus de 25 marques, dont des fournisseurs majeurs de cloud et des sociétés d’infrastructure d’IA, pour aider à la mise en œuvre et à l’utilisation de Llama 3.1. En offrant une gamme de choix de déploiement et d’optimisations, ces partenariats visent à faciliter le travail des développeurs avec le modèle.
En plus de Llama 3.1, Meta publie également de nouvelles applications et de nouveaux frameworks. Il s’agit notamment du filtre d’injection rapide Quick Guard et du modèle de sécurité bilingue Llama Guard 3. Ces éléments font partie de l’initiative de Meta visant à soutenir le développement d’une IA éthique et à contribuer à réduire les risques qui pourraient découler de l’utilisation de modèles linguistiques volumineux.
Photo : Méta
Le secteur de l’IA connaît une concurrence féroce au moment de la sortie de Llama 3.1. Alors que des entreprises comme Anthropic et OpenAI ont attiré beaucoup d’attention pour leurs méthodes à code source fermé, la stratégie open source de Meta incarne un état d’esprit distinct. L’entreprise soutient qu’un meilleur accès à la technologie de l’IA, des procédures de sécurité améliorées et une créativité accrue sont les résultats ultimes de l’IA open source.
Mais la conception open source de Llama 3.1 suscite également des inquiétudes quant à d’éventuels abus. Meta a mis en place un certain nombre de mesures de sécurité, comme une licence que les entreprises disposant d’une base d’utilisateurs importante doivent approuver avant d’utiliser. Afin de détecter et de réduire les dangers potentiels, l’organisation a également effectué de nombreux tests et du red teaming.
On ne sait pas encore quel impact Llama 3.1 aura sur le domaine de l’intelligence artificielle. Si ses performances sont objectivement confirmées, il a le potentiel de changer la dynamique du pouvoir dans le secteur. De plus, la conception open source du modèle pourrait encourager d’autres universitaires et développeurs à travailler sur son amélioration, ce qui pourrait se traduire par un rythme de progression plus rapide qu’avec des modèles à code source fermé.
La sortie de Llama 3.1 par Meta s’inscrit également dans le cadre de son plan d’IA plus vaste, qui consiste à intégrer des fonctionnalités d’IA à toutes ses plateformes et produits. Les fonctionnalités activées par Llama 3.1 sont déployées par l’entreprise sur Facebook, Instagram, WhatsApp et d’autres plateformes de son écosystème. De plus, Meta intègre l’IA dans ses produits de réalité augmentée et virtuelle, notamment les lunettes intelligentes Ray-Ban et le casque Quest.
La création de Llama 3.1 est le résultat d’un investissement considérable de Meta dans la recherche et le développement de l’IA. L’entreprise estime que l’IA sera essentielle à son succès à l’avenir, en particulier dans le cadre du développement de sa vision du métavers. Meta souhaite s’établir comme une force majeure influençant l’orientation de l’intelligence artificielle en étant le fer de lance du développement de l’IA open source.
Le PDG de Meta a révélé que Meta prévoyait de lancer sa deuxième série de lunettes de réalité augmentée plus tard cette année. Les premiers aperçus du nouveau produit sont fournis par une image floue d’une grande paire de lunettes qui se replient à mi-hauteur de chaque branche et près des verres.
L’étude suppose que la prochaine génération de lunettes Meta sera capable d’effectuer des tâches de réalité augmentée supplémentaires, comme l’utilisation d’une technologie de projection standard pour transformer la lentille droite en un affichage tête haute. Avec un poids d’environ 70 grammes, les lunettes pourraient peser près de deux fois plus qu’une paire de lunettes de soleil classique.
Photo : Fils, mkarolian
Meta a déclaré être très mécontent du choix de la marque pour sa prochaine grande aventure dans le domaine de la réalité mixte. Il reste à voir si la prochaine série de lunettes continuera à arborer le logo Ray-Ban.
Google voudrait s’emparer de sa part du marché des lunettes et tenterait d’évincer Meta de la marque EssilorLuxottica, selon deux informations récentes. Bien que l’accord n’ait pas encore été signé, les principaux médias et agences de presse ont rapporté la semaine dernière que Meta pourrait tenter de dépenser des millions de dollars pour acquérir une participation de 5 % dans la société de lunettes dominante, EssilorLuxottica.
Si les lunettes de réalité augmentée de Meta ressemblent effectivement aux lunettes volumineuses présentées sur la photo floue de Threads, EssilorLuxottica pourrait avoir du mal à les commercialiser auprès de ses consommateurs habituels comme la nouveauté la plus intéressante.
