Счётчик токенов LLM

Считайте токены для GPT, Claude и Gemini по мере ввода. Ваши промпты не покидают устройство.

Ваш текст токенизируется локально в вашем браузере и никогда не загружается, но избегайте вставки секретов или производственных данных, которые вы не хотели бы видеть в буфере обмена собственной машины.

Знаете количество токенов? Оцените стоимость API.

Об инструменте Счётчик токенов LLM

Этот счётчик токенов показывает, сколько токенов использует ваш текст в основных языковых моделях, обновляясь вживую по мере ввода или вставки. Подсчёты OpenAI точны, потому что инструмент запускает те же токенизаторы, что поставляет OpenAI — o200k_base для GPT-4o, GPT-4.1 и o-серии, и cl100k_base для GPT-3.5 Turbo и GPT-4. Claude оценивается субсловным токенизатором (o200k_base), а Gemini — примерно из расчёта четыре символа на токен; Anthropic и Google не публикуют браузерный токенизатор, поэтому оба приблизительны для текущих моделей и чётко помечены. Наряду с токенами вы также получаете символы, слова и отношение токенов к символам, что удобно для удержания в пределах контекстного окна или оценки стоимости промпта. Всё токенизируется локально в вашем браузере, поэтому вставленные промпты обрабатываются на вашем устройстве и никогда его не покидают.

Возможности

Как использовать Счётчик токенов LLM

  1. Вставьте или введите ваш промпт в текстовое поле.
  2. Прочитайте живые подсчёты токенов для OpenAI o200k, OpenAI cl100k, Claude и Gemini.
  3. Проверьте значки «точно» и «приблизительно», чтобы увидеть, какие подсчёты точны.
  4. Используйте статистику символов, слов и токенов на символ для оценки использования контекста.
  5. Нажмите «Копировать сводку», чтобы взять все подсчёты сразу.

Пример

Ввод

Summarize this article in three bullet points.

Результат

OpenAI o200k: 10 tokens (exact)
OpenAI cl100k: 10 tokens (exact)
Claude: 10 tokens (approx)
Gemini: 12 tokens (approx)

Подсчёты OpenAI точны; Claude и Gemini — приблизительные оценки.

Частые ошибки и устранение неполадок

Часто задаваемые вопросы

Точны ли подсчёты токенов OpenAI?
Да. Счётчик использует те же токенизаторы на основе пар байтов, что поставляет OpenAI — o200k_base для GPT-4o, GPT-4.1 и o-серии, и cl100k_base для GPT-3.5 Turbo и GPT-4 — поэтому эти подсчёты совпадают с тем, что тарифицирует API OpenAI.
Почему подсчёты Claude и Gemini помечены приблизительными?
Текущие модели Claude и Gemini токенизируют на серверах провайдера и не раскрывают точный браузерный токенизатор. Claude оценивается субсловным токенизатором, а Gemini использует эвристику ~4 символа на токен, поэтому оба помечены как приблизительные.
В чём разница между токенами o200k и cl100k?
Это две кодировки OpenAI. o200k_base используется в GPT-4o, GPT-4.1 и o-серии; cl100k_base используется в GPT-3.5 Turbo и GPT-4. Они токенизируют один и тот же текст немного по-разному, поэтому подсчёты могут отличаться.
Сколько символов в токене?
Для английского текста в среднем примерно четыре символа на токен, но это варьируется в зависимости от пунктуации, пробелов, кода и других языков. Статистика токенов на символ показывает реальное отношение для вашего конкретного ввода.
Отправляется ли мой промпт в OpenAI, Anthropic или Google?
Нет. Вся токенизация выполняется локально в вашем браузере с помощью встроенных токенизаторов, поэтому вставленный текст обрабатывается на вашем устройстве и никогда не загружается ни одному провайдеру моделей, ни в ArrayKit.

Связанные инструменты

Все инструменты ArrayKit