Expliquer le mystère de la taille des jetons dans l'IA :
Une aventure déroutante !
Avril 6, 2023 11: 01 pm
Imaginez que chaque mot et signe de ponctuation dans un texte est comme une pièce de puzzle. Lorsque nous introduisons un morceau de texte dans un modèle de langage IA, il ne peut fonctionner qu'avec un certain nombre de pièces de puzzle à la fois