# groonga - An open-source fulltext search engine and column store.

- 日本語

# 7.8. Tokenizers

- 7.8.1. Summary
- 7.8.2. `TokenBigram`
- 7.8.3. `TokenBigramIgnoreBlank`
- 7.8.4. `TokenBigramIgnoreBlankSplitSymbol`
- 7.8.5. `TokenBigramIgnoreBlankSplitSymbolAlpha`
- 7.8.6. `TokenBigramIgnoreBlankSplitSymbolAlphaDigit`
- 7.8.7. `TokenBigramSplitSymbol`
- 7.8.8. `TokenBigramSplitSymbolAlpha`
- 7.8.9. `TokenBigramSplitSymbolAlphaDigit`
- 7.8.10. `TokenDelimit`
- 7.8.11. `TokenDelimitNull`
- 7.8.12. `TokenMecab`
- 7.8.13. `TokenRegexp`
- 7.8.14. `TokenTrigram`
- 7.8.15. `TokenUnigram`