Считайте токены для GPT, Claude и Gemini по мере ввода. Ваши промпты не покидают устройство.
Счётчик токенов LLM
Считайте токены для GPT, Claude и Gemini по мере ввода. Ваши промпты не покидают устройство.
Ваш текст токенизируется локально в вашем браузере и никогда не загружается, но избегайте вставки секретов или производственных данных, которые вы не хотели бы видеть в буфере обмена собственной машины.
Этот счётчик токенов показывает, сколько токенов использует ваш текст в основных языковых моделях, обновляясь вживую по мере ввода или вставки. Подсчёты OpenAI точны, потому что инструмент запускает те же токенизаторы, что поставляет OpenAI — o200k_base для GPT-4o, GPT-4.1 и o-серии, и cl100k_base для GPT-3.5 Turbo и GPT-4. Claude оценивается субсловным токенизатором (o200k_base), а Gemini — примерно из расчёта четыре символа на токен; Anthropic и Google не публикуют браузерный токенизатор, поэтому оба приблизительны для текущих моделей и чётко помечены. Наряду с токенами вы также получаете символы, слова и отношение токенов к символам, что удобно для удержания в пределах контекстного окна или оценки стоимости промпта. Всё токенизируется локально в вашем браузере, поэтому вставленные промпты обрабатываются на вашем устройстве и никогда его не покидают.
Возможности
Точные подсчёты токенов OpenAI через o200k_base (GPT-4o, GPT-4.1, o-серия) и cl100k_base (GPT-3.5 Turbo, GPT-4)
Приблизительные подсчёты Claude через субсловный токенизатор, чётко помеченные
Приблизительная оценка Gemini из расчёта ~4 символа на токен
Живой пересчёт по мере ввода или вставки, без кнопки «Запустить»
Символы, слова и отношение токенов к символам показаны рядом
Значки «точно» и «приблизительно», чтобы вы знали, каким подсчётам доверять
Копирование сводки всех подсчётов в один клик для заметок или задач
Работает полностью в вашем браузере без загрузки промпта
Как использовать Счётчик токенов LLM
Вставьте или введите ваш промпт в текстовое поле.
Прочитайте живые подсчёты токенов для OpenAI o200k, OpenAI cl100k, Claude и Gemini.
Проверьте значки «точно» и «приблизительно», чтобы увидеть, какие подсчёты точны.
Используйте статистику символов, слов и токенов на символ для оценки использования контекста.
Нажмите «Копировать сводку», чтобы взять все подсчёты сразу.
Подсчёты OpenAI точны; Claude и Gemini — приблизительные оценки.
Частые ошибки и устранение неполадок
Подсчёт Claude не совпадает точно с использованием в моей панели Anthropic. — Считайте подсчёты Claude приблизительными. Anthropic не поставляет браузерный токенизатор, поэтому этот инструмент оценивает Claude субсловным токенизатором; подтверждайте точное использование в консоли Anthropic.
Число Gemini выглядит грубее остальных. — Google не публикует браузерный токенизатор, поэтому Gemini оценивается примерно из расчёта четыре символа на токен. Используйте это как ориентир и проверяйте через эндпоинт count-tokens Google, когда важна точность.
OpenAI o200k и cl100k показывают разные подсчёты для одного текста. — Это ожидаемо. GPT-4o и o-серия используют o200k_base, а GPT-3.5 Turbo и GPT-4 используют cl100k_base, и два кодировщика разбивают текст по-разному. Читайте подсчёт для того семейства моделей, на которое нацелены.
Очень длинный документ ощущается медленным при пересчёте. — Токенизация большого текста при каждом нажатии клавиши затратна. Счётчик пересчитывает только при изменении текста; для огромных вводов вставляйте по частям, если браузер подтормаживает.
Часто задаваемые вопросы
Точны ли подсчёты токенов OpenAI?
Да, для самого текста. Счётчик использует те же кодировки на основе пар байтов, что поставляет OpenAI: o200k_base для GPT-4o, GPT-4.1 и o-серии и cl100k_base для GPT-3.5 Turbo и GPT-4. Оплачиваемый чат-запрос добавляет по несколько служебных токенов форматирования на каждое сообщение, поэтому счёт промпта в API выходит немного больше.
Почему подсчёты Claude и Gemini помечены приблизительными?
Текущие модели Claude и Gemini токенизируют на серверах провайдера и не раскрывают точный браузерный токенизатор. Claude оценивается субсловным токенизатором, а Gemini использует эвристику ~4 символа на токен, поэтому оба помечены как приблизительные.
В чём разница между токенами o200k и cl100k?
Это две кодировки OpenAI. o200k_base используется в GPT-4o, GPT-4.1 и o-серии; cl100k_base используется в GPT-3.5 Turbo и GPT-4. Они токенизируют один и тот же текст немного по-разному, поэтому подсчёты могут отличаться.
Сколько символов в токене?
Для английского текста в среднем примерно четыре символа на токен, но это варьируется в зависимости от пунктуации, пробелов, кода и других языков. Статистика токенов на символ показывает реальное отношение для вашего конкретного ввода.
Отправляется ли мой промпт в OpenAI, Anthropic или Google?
Нет. Вся токенизация выполняется локально в вашем браузере с помощью встроенных токенизаторов, поэтому вставленный текст обрабатывается на вашем устройстве и никогда не загружается ни одному провайдеру моделей, ни в ArrayKit.