> ## Documentation Index
> Fetch the complete documentation index at: https://private-7c7dfe99-mintlify-3a82795f.mintlify.site/llms.txt
> Use this file to discover all available pages before exploring further.

> Системная таблица, в которой отображаются все доступные токенизаторы.

# system.tokenizers

<Info>
  **Запросы в ClickHouse Cloud**

  Данные в этой системной таблице хранятся локально на каждом узле ClickHouse Cloud. Поэтому, чтобы получить полное представление обо всех данных, требуется функция `clusterAllReplicas`. Дополнительные сведения см. [здесь](/ru/reference/system-tables/overview#system-tables-in-clickhouse-cloud).
</Info>

<div id="description">
  ## Описание
</div>

Показывает все доступные токенизаторы.
Их можно использовать в функциях [tokens](/ru/reference/functions/regular-functions/splitting-merging-functions#tokens), [hasAllTokens](/ru/reference/functions/regular-functions/string-search-functions#hasAllTokens), [hasAnyTokens](/ru/reference/functions/regular-functions/string-search-functions#hasAnyTokens), а также в [текстовом индексе](/ru/reference/engines/table-engines/mergetree-family/textindexes).

<div id="columns">
  ## Столбцы
</div>

* `name` ([String](/ru/reference/data-types)) — Имя токенизатора

<div id="example">
  ## Пример
</div>

```sql theme={null}
SELECT * FROM system.tokenizers;
```

```text theme={null}
┌─name────────────┐
│ ngrams          │
│ splitByNonAlpha │
│ sparseGrams     │
│ tokenbf_v1      │
│ ngrambf_v1      │
│ array           │
│ splitByString   │
│ sparse_grams    │
│ asciiCJK        │
└─────────────────┘
```