Que faire lorsque le LLM atteint sa limite ?

Les chercheurs examinent le LCM puisque le LLM atteint sa limite.

Meta change de paradigme d'IA en passant des MLM aux MCG.

Pourquoi cela compte :

Les MLM (Modèles de Langage de Grande Échelle) excellent dans le traitement au niveau du jeton, mais font défaut lorsqu'il s'agit de raisonnement hiérarchique et de cohérence à long terme - des traits essentiels de l'intelligence humaine.

Les nouveaux Modèles de Concepts de Grande Échelle (MCG) de Meta renversent la situation en fonctionnant au niveau de la phrase dans un espace d'intégration multidimensionnel indépendant de la langue. Au lieu de prédictions basées sur les jetons, les MCG utilisent des « concepts » (pensez à des idées sémantiques, et non seulement à des mots), leur permettant de :

🔹 Planifier les sorties avec des structures hiérarchiques explicites

🔹 Gérer les contextes longs de manière plus efficace

🔹 Généraliser à 200 langues sans réentraînement

Cette architecture est conçue pour refléter la façon dont les humains pensent - en raisonnant de manière abstraite plutôt que mot par mot.

Meta a open-sourcé le code MCG, afin que la communauté puisse expérimenter cette approche révolutionnaire.

Dépôt Github : https://github.com/facebookresearch/large_concept_model

Veuillez noter que la version française est assistée par Ai, des erreurs mineures peuvent donc exister.

Auteur

AiUTOMATING PEOPLE, ABN ASIA a été fondée par des personnes ayant des racines profondes dans le milieu académique, avec une expérience professionnelle aux États-Unis, aux Pays-Bas, en Hongrie, au Japon, en Corée du Sud, à Singapour et au Vietnam. ABN ASIA est l'endroit où l'académie et la technologie rencontrent l'opportunité. Avec nos solutions de pointe et nos services de développement logiciel compétents, nous aidons les entreprises à se développer et à s'imposer sur la scène mondiale. Notre engagement : Plus vite. Mieux. Plus fiable. Dans la plupart des cas : moins cher également.

N'hésitez pas à nous contacter chaque fois que vous avez besoin de services informatiques, de conseils en matière de numérique, de solutions logicielles prêtes à l'emploi, ou si vous souhaitez nous envoyer des demandes de propositions (RFP). Vous pouvez nous contacter à l'adresse [email protected]. Nous sommes prêts à vous aider avec tous vos besoins technologiques.

© ABN ASIA