tokenize
Split text into tokens using YandexGPT. Returns a list of tokens and their total count for further text analysis.
Instructions
Токенизация текста моделью YandexGPT. Возвращает список токенов и их количество.
Input Schema
| Name | Required | Description | Default |
|---|---|---|---|
| text | Yes | Текст для токенизации | |
| model | No | Модель для токенизации | yandexgpt-lite |