# groonga - オープンソースのカラムストア機能付き全文検索エンジン

- English page

### ナビゲーション

- 索引
- 次へ |
- 前へ |
- Groonga v4.0.6.1ドキュメント »
- 7. リファレンスマニュアル »

# 7.8. Tokenizers

TODO: Write me.

以下は組み込みのトークナイザーのリストです。

- TokenBigram
- TokenBigramSplitSymbol
- TokenBigramSplitSymbolAlpha
- TokenBigramSplitSymbolAlphaDigit
- TokenBigramIgnoreBlank
- TokenBigramIgnoreBlankSplitSymbol
- TokenBigramIgnoreBlankSplitAlpha
- TokenBigramIgnoreBlankSplitAlphaDigit
- TokenDelimit
- TokenDelimitNull
- TokenTrigram
- TokenUnigram

### ナビゲーション

- 索引
- 次へ |
- 前へ |
- Groonga v4.0.6.1ドキュメント »
- 7. リファレンスマニュアル »