Calculadora de Tokens

Calcule a quantidade aproximada de tokens em seu texto com base nas regras de contagem da OpenAI

Esta calculadora fornece uma estimativa de tokens com base nas regras da OpenAI. A contagem pode variar dependendo do modelo específico e do idioma utilizado.

O que são tokens e como são contados?

Tokens são as unidades básicas de texto que os modelos de linguagem processam. Eles podem ser pensados como pedaços de palavras, mas não são exatamente palavras completas. Um token pode incluir espaços em branco e até mesmo partes de palavras.

Exemplos práticos:

  • A frase "You miss 100% of the shots you don't take" contém 11 tokens.
  • A carta da OpenAI contém 476 tokens.
  • A Declaração de Independência dos EUA contém 1.695 tokens.

Dicas importantes:

  • A contagem de tokens pode variar dependendo do modelo específico usado.
  • Textos em diferentes idiomas podem ter diferentes proporções de tokens por caractere.
  • Números, pontuação e caracteres especiais também contam como tokens.
  • Esta calculadora fornece uma estimativa baseada na média de 4 caracteres por token em inglês.