Pular para o conteúdo principal

Uma postagem marcadas com "explicação"

Ver todas os Marcadores

O que é um Token em um LLM?

· Leitura de 4 minutos

Tokens são elementos fundamentais para entender como os modelos de linguagem de grande escala (LLMs) funcionam. Se você já usou uma ferramenta baseada em um LLM, como um chatbot ou um assistente de voz, é provável que essas ferramentas processem suas solicitações dividindo-as em "tokens". Mas o que exatamente é um token e por que é essencial?