Tokeniser une phrase fictive, associer des vecteurs et montrer pourquoi proximité ne signifie pas synonymie parfaite.
Preuve de réussite : explique « Tokens et plongements », réalise « Le dictionnaire vectoriel » et cite la limite de l’analogie.
Dans le journal imaginaire du club, la phrase « Les lucioles éclairent le jardin » doit devenir des nombres. Maëlle découvre qu'un tokenizer peut séparer ponctuation, mots ou fragments de mots. Chaque token reçoit un identifiant, puis une table de plongements transforme cet identifiant en vecteur. Les vecteurs sont ajustés pendant l'apprentissage : des usages semblables peuvent rapprocher certaines directions, mais la géométrie dépend du corpus et de l'objectif.
Aperçu — la suite de la leçon est réservée aux inscrits.
Votre accès est rattaché à votre compte, pas à ce lien. Connectez-vous avec le même courriel qu'en classe : votre cours vous attend, inutile de ré-entrer le code.
Se connecterPas encore de compte ? En créer unLes premiers modules du cours sont en accès libre. Pour la suite, trois possibilités : acheter ce cours une fois pour toutes, vous abonner pour tout ouvrir, ou entrer le code si vous suivez le cours en classe.