Unité de texte utilisée par les LLMs (souvent un mot, une syllabe ou un caractère) dans le traitement du langage.
« Back to Glossary IndexToken
« Back to Glossary Index
Unité de texte utilisée par les LLMs (souvent un mot, une syllabe ou un caractère) dans le traitement du langage.
« Back to Glossary Index