La Limite des Modèles de Langage

C'est inévitable, un modèle de langage (LLM) comme ChatGPT oublie ce qu'on lui dit au fil de la conversation. Ces intelligences artificielles sont dites limitées par leur "longueur de contexte". Cette intervention explore les caractéristiques du langage naturel, pourquoi les méthodes imaginées pour le traiter efficacement par ordinateur sont gourmandes en ressources, et comment cela mène à des limites de contexte.