Loading prices...
Все новости
Глянцевый брусок в форме слова, разрезанный на семь цветных скруглённых плиток, одна плитка падает на стопку золотых монет в янтарном свечении, тёмно-синий стальной фон со схемными дорожками

Токены в ИИ: почему GPT-6.2 продают за миллион, а русский текст дороже

OpenAI берёт деньги за модели GPT-6.2 за каждый миллион токенов.

Миллион токенов ответа стоит $10 у Sol и $40 у Astra.

Токен это кусок текста, который модель читает и пишет, обычно часть слова. Чтобы понять, что это значит для живого запроса, мы прогнали через токенизатор OpenAI собственную новость.

Что мы измерили

Мы взяли сегодняшний материал о лицензиях MiCA, который выходит на английском и русском, и посчитали токены в тексте с помощью tiktoken, открытой библиотеки OpenAI. Кодировка o200k_base, её OpenAI представила вместе с GPT-4o.

Какой токенизатор у GPT-6.2, компания не сообщала, поэтому цифры ниже это оценка.

  • английская версия: 469 слов, 655 токенов, около 1,4 токена на слово
  • русская версия: 421 слово, 775 токенов, около 1,8 токена на слово
  • тот же русский текст в cl100k_base, старой кодировке GPT-4: 1238 токенов

Слов в русском тексте меньше, а токенов на 18% больше.

Причина видна на отдельных словах. «Bitcoin» это один токен, а «биткоин» делится на три, украинское «Біткоїн» на четыре. «Stablecoin» занимает два токена, «стейблкоин» шесть.

Сколько стоит запрос

По цене Sol ответ длиной с нашу английскую новость обходится примерно в $0,0066, русский в $0,0078.

У Astra те же ответы стоят около $0,026 и $0,031.

Входящий текст дешевле: $2 за миллион токенов у Sol и $8 у Astra. Для одного запроса это доли цента, но сервис, который обрабатывает тысячи писем или документов в день, почувствует разницу между языками в счёте.

Токены задают и предел того, сколько модель держит в голове за раз. Контекстное окно тоже считают в токенах, поэтому длинный русский документ заполняет его быстрее, чем тот же документ на английском.

Андрей Карпатый, один из основателей OpenAI и бывший руководитель ИИ в Tesla, начал свою лекцию о токенизаторах 2024 года с предупреждения.

“Токенизация лежит в основе множества странностей LLM, и я бы советовал не отмахиваться от неё.”

— Андрей Карпатый, исследователь ИИ, из конспекта лекции о токенизации

Источник цитаты: конспект лекции minbpe на GitHub.

В том же списке примеров Карпатый прямо называет токенизацию причиной того, что модели хуже работают с неанглийскими языками, например с японским.

Мнение редакции

Редактор Intokened Макс признаётся, что труднее всего ему было понять термин LLM, то есть саму большую языковую модель. С токенов начать проще: модель читает и пишет текст такими кусками, и вы платите за каждый из них.

Если вы работаете на русском или украинском, закладывайте примерно на пятую часть больше токенов, чем для того же текста на английском, и проверяйте свои промпты в токенизаторе до того, как считать месячный счёт. Остальные термины со страниц с ценами объясняет наш глоссарий ИИ.

Токены посчитаны библиотекой tiktoken в кодировках o200k_base и cl100k_base 18 ноября 2026 года. Цены взяты из анонса GPT-6.2 от OpenAI от 17 ноября.

Опубликовано: 02:00 · 19.11.2026
Maks

Автор

Maks

Трейдер

Долгое время интересуюсь рынком криптовалют, являюсь трейдером, пишу статьи и новости о своем опыте простыми словами.

Комментарии (0)

Пока нет комментариев — будь первым!

Присоединяйся к нашему комьюнити

Без спама, можно отписаться в один клик