Apple dévoile le nouveau modèle MM1 AI

Les chercheurs d'Apple viennent de publier un nouvel article décrivant MM1, une famille de modèles d'IA multimodaux qui combinent la vision et la compréhension du langage pour permettre des fonctionnalités avancées.

Détails.

Le modèle MM1 est entraîné sur un mélange soigneusement sélectionné de légendes d'images, de données textuelles d'images et de données textuelles simples.

Le plus grand modèle paramétrique 30B montre la puissance de l'apprentissage à partir d'un petit nombre d'exemples et de la déduction de plusieurs images.

L'étude révèle que
C'est le traitement de l'image du modèle réduit qui a le plus d'impact sur les performances.

Le benchmark MM1 est en concurrence avec des modèles multimodaux de pointe tels que GPT-4V et Gemini Pro.

Raison de s'inquiéter : la publication détaillée et discrète des nouveaux modèles d'Apple est loin de son style habituel de secret, et constitue une grande victoire pour les logiciels libres. Maintenant qu'un nouveau modèle puissant est officiellement disponible, Siri est-il enfin prêt pour une mise à jour ?

Voir le document