Jeton
Un jeton, dans le contexte des grands modèles de langage (LLM), est une séquence de caractères que le modèle convertit en représentations numériques pour un traitement efficace. Les jetons sont les unités de base du texte utilisées par les LLM comme GPT-3 et ChatGPT pour comprendre et générer du langage.
•
4 min read