logo
2.12.22 (851)

Enseignement spécifique des masters - MDC_53607_EP : Traitement du langage naturel et grands modèles linguistiques

Descriptif

Le traitement automatique du langage naturel (NLP) constitue un domaine de recherche central en intelligence artificielle et fournit les fondements des grands modèles de langage modernes (LLM). Ce cours introductif de 20 heures couvrira principalement les trois aspects suivants : (1) les concepts fondamentaux et les techniques traditionnelles du NLP ; (2) les avancées récentes ayant conduit aux LLM et rendues possibles par ceux-ci ; et (3) une sélection de développements avancés et d’applications dans des contextes multimodaux, où le langage est combiné avec d’autres modalités de données telles que la vision et l’audio.

Format des notes

Numérique sur 20

Littérale/grade européen

Pour les étudiants du diplôme Diplôme d'Ingénieur de l'Ecole Nationale Supérieure de Techniques Avancées (Institut polytechnique de Paris)

Le rattrapage est autorisé (Note de rattrapage conservée)
  • le rattrapage est obligatoire si :
    Note initiale < 7
  • le rattrapage peut être demandé par l'étudiant si :
    7 ≤ note initiale < 10
L'UE est acquise si Note finale >= 10

    Programme détaillé

    - Cours 1–2 : Introduction au NLP et aux techniques classiques de traitement automatique du langage. - Cours 3–5 : Transformers et grands modèles de langage (LLM), notamment le pré-entraînement, l’affinage (fine-tuning) et le raisonnement. - Cours 6 : Modèles de langage multimodaux et applications associées.
    Veuillez patienter