このページの2つのバージョン間の差分を表示します。
| 両方とも前のリビジョン 前のリビジョン 次のリビジョン | 前のリビジョン | ||
|
mroonga:10.7:config [2020/11/10 13:44] y2sunlight |
mroonga:10.7:config [2020/11/11 10:00] (現在) y2sunlight [TokenMecab] |
||
|---|---|---|---|
| 行 50: | 行 50: | ||
| |リンゴ|りんご|カタカナ < | |リンゴ|りんご|カタカナ < | ||
| - | 結論から先に言うと、ノーマライザーとして [[https:// | + | 結論から先に言うと、ノーマライザーとしては [[https:// |
| \\ | \\ | ||
| 行 211: | 行 211: | ||
| |none|トークナイズしません。| | |none|トークナイズしません。| | ||
| |TokenDelimit|空白区切りでトークナイズします。| | |TokenDelimit|空白区切りでトークナイズします。| | ||
| + | |TokenRegexp|正規表現検索をサポートするトークナイザーです。| | ||
| |TokenUnigram|ユニグラム(1-Gram)でトークナイズします。| | |TokenUnigram|ユニグラム(1-Gram)でトークナイズします。| | ||
| |TokenBigram|バイグラム(2-Gram)でトークナイズします。| | |TokenBigram|バイグラム(2-Gram)でトークナイズします。| | ||
| 行 235: | 行 236: | ||
| ==== TokenMecab ==== | ==== TokenMecab ==== | ||
| - | 本編で使用している MariaDB with Mroonga (Windows版バイナリ) ではパーサとして形態素解析エンジンの Mecab がバンドルされていて直ぐに利用することができます。Mecab の本体は以下の配置されています: | + | 本編で使用している MariaDB with Mroonga (Windows版バイナリ) ではパーサとして形態素解析エンジンの Mecab がバンドルされていて直ぐに利用することができます。Mecab の本体は以下に配置されています: |
| < | < | ||