このページの2つのバージョン間の差分を表示します。
両方とも前のリビジョン 前のリビジョン 次のリビジョン | 前のリビジョン 最新のリビジョン 両方とも次のリビジョン | ||
mroonga:10.7:config [2020/11/10 13:44] y2sunlight |
mroonga:10.7:config [2020/11/11 09:57] y2sunlight [ノーマライズ] |
||
---|---|---|---|
行 50: | 行 50: | ||
|リンゴ|りんご|カタカナ < | |リンゴ|りんご|カタカナ < | ||
- | 結論から先に言うと、ノーマライザーとして [[https:// | + | 結論から先に言うと、ノーマライザーとしては [[https:// |
\\ | \\ | ||
行 211: | 行 211: | ||
|none|トークナイズしません。| | |none|トークナイズしません。| | ||
|TokenDelimit|空白区切りでトークナイズします。| | |TokenDelimit|空白区切りでトークナイズします。| | ||
+ | |TokenRegexp|正規表現検索をサポートするトークナイザーです。| | ||
|TokenUnigram|ユニグラム(1-Gram)でトークナイズします。| | |TokenUnigram|ユニグラム(1-Gram)でトークナイズします。| | ||
|TokenBigram|バイグラム(2-Gram)でトークナイズします。| | |TokenBigram|バイグラム(2-Gram)でトークナイズします。| |