Токен
Токен - единица текста, которой оперирует модель: примерно часть слова, а не символ и не слово.
Стоимость обращения к модели, размер окна контекста и скорость ответа считаются в токенах. На русском тексте токенов обычно больше, чем на английском той же длины, поэтому «сырой» HTML стоит дороже, чем кажется.
В срезAI
Мы продаём результат, а не токены, но объём входа всё равно важен: очистка страницы до Markdown снижает число входных токенов, а извлечение по схеме возвращает только нужные поля вместо всего текста.
Обновлено 27 сентября 2026
Рядом по смыслу: Чанкинг, Эмбеддинги и Reranker - эти термины чаще всего встречаются рядом с «Токен», когда речь идёт о подаче данных в языковые модели.
Не хватает термина?
Скажите, какого слова не хватает - допишем. А если нужно не определение, а рабочий пример, он есть в документации: те же понятия, но уже в виде параметров и ответов API.