Llama 3.2 apporte des fonctionnalités telles que la traduction vidéo lip-sync, les voix de célébrités et bien plus encore à Meta AI

Aujourd'hui (25) est arrivé le Méta Connexion 2024, un événement de l'entreprise responsable de Facebook, Instagram et WhatsApp, avec l'annonce de son actualité technologique, présentée par l'entreprise elle-même Mark Zuckerberg. Au-delà des lunettes holographiques Orion, nous avons encore vu des nouvelles sur le Lama 3.2 et Meta AI — qui intègre tous les réseaux sociaux de l'entreprise. Découvrez maintenant les points forts de l’intelligence artificielle de Meta

Nouvelles fonctionnalités arrivant avec Llama 3.2

Les deux plus grandes nouveautés de la collection Llama 3.2avec Paramètres 11B et 90B (11 et 90 milliards, respectivement), se distinguent par leur prise en charge des tâches de raisonnement visuel, telles que la compréhension de documents complexes, notamment des tableaux et des graphiques, ainsi que les légendes d'images et l'identification d'objets dans des scènes visuelles basées sur des descriptions en langage naturel.

Un exemple pratique concerne la capacité de Llama 3.2 à analyser des graphiques pour répondre rapidement aux questions sur les performances commerciales d'une entreprise au cours d'un mois donné. Dans un autre cas, le modèle peut interpréter des cartes, indiquant quand un sentier devient plus raide ou la distance d'un itinéraire spécifique. Ces modèles avancés se connectent également vision et langage, étant capable d'extraire les détails d'une image et de générer des légendes pour décrire la scène.

Meta a également annoncé des modèles plus légers, Paramètres 1B et 3B, pour les petits appareils comme les smartphones et les lunettes intelligentes. Ceux-ci ont été faits pour génération de texte multilingue et exécution de commandes automatisées. Ils permettent le développement d'applications personnalisables qui fonctionnent directement sur les appareils, garantissant une confidentialité totale, car les données ne sont pas envoyées vers le cloud. Ces applications peuvent résumer les messages entrants et identifier les éléments importants pour envoyer des invitations de calendrier directement à l'aide de la fonctionnalité d'appel de l'outil.

L’exécution des modèles localement présente deux avantages principaux : des réponses presque instantanées, en raison du traitement direct sur l'appareil, et une plus grande confidentialité, en évitant d'envoyer des données sensibles vers le cloud. Cela permet de contrôler quelles requêtes restent sur l'appareil et lesquelles peuvent être traitées par des modèles plus grands dans le cloud de manière claire et sécurisée.

Ce travail a été soutenu par nos partenaires de la communauté IA. Nous souhaitons remercier et reconnaître (par ordre alphabétique) : Accenture, AMD, Arm, AWS, Cloudflare, Databricks, Dell, Deloitte, Fireworks.ai, Google Cloud, Groq, Hugging Face, IBM Watsonx, Infosys, Intel, Kaggle, Lenovo, LMSYS, MediaTek, Microsoft Azure, NVIDIA, OctoAI, Ollama, Oracle Cloud, PwC, Qualcomm, Sarvam AI, Scale AI, Snowflake, Together AI et UC Berkeley – Projet vLLM.

Meta Merci sur votre site Web

Nouvelles fonctionnalités de méta-IA

Et l'actualité ne s'arrête pas là ! Meta AI bénéficiera des nouvelles fonctionnalités suivantes :

Voix sur WhatsApp, Instagram, Facebook et Messenger

Mark Zuckerberg a annoncé une nouvelle mise à jour des assistants IA de Meta, qui présenteront désormais des voix de célébrités telles que Dame Judi Dench, John Cena, Awkwafina, Keegan Michael Key et Kristen Bell. L'idée est de rendre l'interaction plus naturelle et amusante, en offrant une expérience personnalisée sur des plateformes telles que Facebook, Messager, WhatsApp e Instagram.

Outre les nouvelles voix, l’une des innovations les plus significatives est la capacité des modèles d’IA à interpréter des photos et d'autres informations visuelles des utilisateurs, élargissant les alternatives d'interaction et offrant des réponses encore plus contextuelles et pertinentes pour chaque utilisateur.

Afficher, expliquer et modifier des images

La capacité d'édition de Meta AI a également été étendue, lui permettant de traiter informations visuelles. Il sera désormais possible de prendre une photo d'une fleur en marchant et de demander à Meta AI de l'identifier et/ou l'expliquer davantage, ou faites le télécharger une image d'un plat et recevez la recette correspondante.

Les utilisateurs pourront également faire modifications détaillées de vos vraies photos utiliser des commandes dans le langage courant, comme ajouter ou supprimer des éléments. Auparavant, cette fonctionnalité ne fonctionnait que sur les images générées par Meta AI, mais elle est désormais disponible pour photos prises par les utilisateurs, facilitant des ajustements personnalisés.

avec la fonction Imagine de Meta AI, vous pourrez vous insérer dans des histoires, des publications de flux et même votre photo de profil sur Facebook et Instagram, partage Selfies générés par l'IA de manière interactive. L'IA peut également suggérer des légendes pour vos Stories Instagram et Facebook. Choisissez simplement une image et Meta AI vous proposera plusieurs options de légende, ce qui facilitera le choix de celle qui convient le mieux à votre message.

Doublage lip sync sur Reels

Meta teste actuellement également le doublage vidéo automatique avec synchronisation labiale sur Instagram et Facebook Reels, en commençant par les langues Anglais et espagnol. Cette fonctionnalité permettra aux utilisateurs de regarder du contenu dans leur langue maternelle, ce qui facilitera leur compréhension et leur interaction.

Initialement, la fonctionnalité est disponible pour un petit groupe de créateurs, mais il est prévu de l'étendre à plus de créateurs et inclure d'autres langues prochainement. Cette avancée pourrait potentiellement accroître considérablement la portée des créateurs de contenu, permettant à leurs productions de surmonter les barrières linguistiques et de toucher un public mondial, quelle que soit la langue parlée.

Disponibilité

La société prétend que le Llama 3.2 est désormais disponible sur les plateformes Meta, à l'exception des mises à jour vocales Meta AI. Ceux-ci sont disponibles en Australie, au Canada, en Nouvelle-Zélande et aux États-Unis, en anglais uniquement.

Et vous, qu'avez-vous pensé de la nouvelle ? Dites-nous Commenter!

Voir aussi:

Méta spectacles Lunettes holographiques Orion, qui affichent des images à l'écran.

Avec des informations de : Objectif [1] e [2].

Texte relu par : Daniel Coutinho (25 / 09 / 24)