system.tokenizers

ClickHouse Cloud でのクエリ実行

このシステムテーブルのデータは、ClickHouse Cloud の各ノードにローカルに格納されています。そのため、すべてのデータを包括的に確認するには、clusterAllReplicas 関数を使用する必要があります。詳細についてはこちらを参照してください。

利用可能なすべてのトークナイザーを表示します。これらは関数 tokens、hasAllTokens、hasAnyTokens、および text index で使用できます。

カラム:

name (String) — トークナイザーの名前
type (String) — トークナイザーの型

例

SELECT * FROM system.tokenizers;

┌─name────────────┬─type────────────┐
│ ngrams          │ Ngrams          │
│ splitByNonAlpha │ SplitByNonAlpha │
│ sparseGrams     │ SparseGrams     │
│ tokenbf_v1      │ SplitByNonAlpha │
│ ngrambf_v1      │ Ngrams          │
│ array           │ Array           │
│ splitByString   │ SplitByString   │
│ sparse_grams    │ SparseGrams     │
└─────────────────┴─────────────────┘