Processamento de Texto

Dessintetização é o processo de converter tokens de volta em texto de linguagem natural.

SentencePiece é uma ferramenta de tokenização de texto e segmentação de subpalavras usada no processamento de linguagem natural.