Explore 1 AI terms in Techniques de tokenisation
La tokenisation par sous-mots divise les mots en unités plus petites pour une meilleure compréhension du langage dans les modèles d'IA.
