Article en référence: https://huggingface.co/papers/2412.10360
Article Reddit: Meta releases the Apollo family of Large Multimodal Models. The 7B is SOTA and can comprehend a 1 hour long video. You can run this locally. https://www.reddit.com/r/LocalLLaMA/comments/1hffh35/meta_releases_the_apollo_family_of_large/
Une nouvelle famille de modèles d’intelligence artificielle multimodaux, nommée Apollo, vient d’être dévoilée. Ces modèles, développés en collaboration entre Meta et Stanford, sont capables d’analyser et de comprendre des vidéos d’une durée allant jusqu’à une heure - une avancée significative dans le domaine.
La famille Apollo comprend trois modèles de tailles différentes (1.5B, 3B et 7B paramètres), tous basés sur l’architecture Qwen 2.5. Le plus impressionnant, Apollo-7B, surpasse des modèles beaucoup plus grands comptant jusqu’à 30 milliards de paramètres. Ces modèles peuvent être exécutés localement sur un ordinateur personnel équipé d’une carte graphique suffisamment puissante.
Pour les non-initiés, un modèle multimodal est une IA capable de traiter différents types de données (texte, image, vidéo) simultanément. Le nombre de paramètres (1.5B = 1.5 milliard) représente la complexité du modèle - plus il y en a, plus le modèle est sophistiqué, mais plus il demande de ressources informatiques.
L’arrivée d’Apollo représente une évolution naturelle plutôt qu’une révolution dans le domaine de l’IA. Si ses capacités sont impressionnantes, elles s’inscrivent dans la continuité des progrès réguliers que nous observons depuis plusieurs années.
Le choix d’utiliser l’architecture Qwen plutôt que celle de Meta (LLaMA) est intrigant mais pragmatique. Il démontre une volonté de privilégier l’efficacité plutôt que la politique d’entreprise. La possibilité d’exécuter ces modèles localement est prometteuse, mais les contraintes matérielles actuelles en limitent l’utilisation pratique.
Les performances annoncées sont encourageantes, mais comme toujours dans le domaine de l’IA, il faudra attendre les tests en conditions réelles pour en mesurer la véritable portée.
C’est une révolution dans l’accessibilité de l’IA ! Imaginez pouvoir analyser automatiquement des heures de vidéos de formation, de conférences ou de contenus éducatifs. Plus besoin de regarder des tutoriels en entier - Apollo pourra nous diriger directement vers les informations pertinentes.
Cette démocratisation de l’IA multimodale ouvre la voie à des applications infinies : assistance médicale, éducation personnalisée, surveillance intelligente pour la sécurité, analyse automatique de contenu… Et ce n’est que le début ! La capacité d’exécuter ces modèles localement signifie plus de confidentialité et d’autonomie pour les utilisateurs.
Le fait qu’un modèle de 7B paramètres puisse surpasser des modèles de 30B montre que nous entrons dans une ère d’IA plus efficiente et accessible.
L’enthousiasme autour d’Apollo masque plusieurs préoccupations importantes. D’abord, les chercheurs admettent eux-mêmes ne pas comprendre totalement comment ces modèles fonctionnent, ce qui soulève des questions sur leur fiabilité et leur contrôle.
Les besoins en ressources informatiques pour traiter des vidéos d’une heure sont considérables, rendant l’utilisation pratique limitée pour la plupart des utilisateurs. De plus, la précision de l’analyse dépend fortement de la façon dont le modèle échantillonne les images de la vidéo, créant un risque de conclusions erronées.
La démocratisation de tels outils pourrait aussi faciliter la création et la diffusion de désinformation vidéo, ou permettre une surveillance de masse plus sophistiquée. Sans compréhension approfondie de leur fonctionnement, nous risquons de créer des systèmes puissants mais imprévisibles.
Si vous n'êtes pas redirigé automatiquement, 👉 cliquez ici 👈