TinySegmenter

TinySegmenter: Javascriptだけで実装されたコンパクトな分かち書きソフトウェア

TinySegmenterはJavascriptだけ書かれた極めてコンパクトな日本語分かち書きソフトウェアです。わずか25kバイトのソースコードで、日本語の新聞記事であれば文字単位で95%程度の精度で分かち書きが行えます。 Yahoo!の形態素解析のようにサーバーサイドで解析するのではなく、全てクライアントサイドで解析を行うため、セキュリティの観点から見ても安全です。分かち書きの単位はMeCab + ipadicと互換性があります。

ついに専門の方の手によるものが。

私のは行き当たりばったりの非論理的なコードですが、こちらはかなりシステマティックでロジカルでクールな信頼性のあるコードになってます。

というわけで、さっそく追加。

JS形態素解析もどきのテスト

■ テスト

順にMECAPI（MeCab）、TinySegmenter、私の。

1. 「吾輩は猫である。名前はまだ無い。」
   1. 「吾輩|は|猫|で|ある|。|名前|は|まだ|無い|。」
   2. 「吾輩|は|猫|で|ある|。|名前|は|まだ|無い|。」
   3. 「吾輩|は|猫|で|ある|。|名前|は|まだ|無い|。」
2. 「私は、その男の写真を三葉、見たことがある。」
   1. 「私|は|、|その|男|の|写真|を|三|葉|、|見|た|こと|が|ある|。」
   2. 「私|は|、|その|男|の|写真|を|三葉|、|見|た|こと|が|ある|。」
   3. 「私|は|、|その|男|の|写真|を|三葉|、|見た|こと|が|ある|。」
3. 「私の執事をやらないか？」
   1. 「私|の|執事|を|やら|ない|か|？」
   2. 「私|の|執事|を|やら|ない|か|？」
   3. 「私|の|執事|を|やら|ない|か|？」
4. 「サンタクロースをいつまで信じていたかなんてことはたわいもない世間話にもならないくらいのどうでもいいような話だが、それでも俺がいつまでサンタなどという想像上の赤服じーさんを信じていたかと言うとこれは確信を持って言えるが最初から信じてなどいなかった。」
   1. 「サンタクロース|を|いつまで|信|じて|いたか|なんて|こと|は|たわいも|ない|世間話|に|も|ならないくらい|の|どうでも|いいような|話|だが|、|それでも|俺|が|いつまで|サンタ|など|と|いう|想像上|の|赤服|じ|ー|さんを|信|じて|いたか|と|言|うと|これは|確信|を|持|って|言|えるが|最初|から|信|じて|など|いなか|った|。」
   2. 「サンタクロース|を|いつ|まで|信じ|て|い|たか|なん|て|こと|は|たわい|も|ない|世間|話|に|も|なら|ない|くらい|の|どう|でも|いい|よう|な|話|だ|が|、|それ|でも|俺|が|いつ|まで|サンタ|など|という|想像|上|の|赤服|じー|さん|を|信じ|て|い|たか|と|言う|とこれ|は|確信|を|持っ|て|言える|が|最初|から|信じ|て|など|い|なかっ|た|。」
   3. 「サンタクロース|を|いつ|まで|信じ|て|いたか|なんて|こと|は|たわい|も|ない|世間話|に|も|なら|ないくらい|の|どう|でも|いいような|話|だが|、|それでも|俺|が|いつ|まで|サンタ|など|という|想像上|の|赤服|じーさん|を|信じ|て|いたか|と|言う|と|これ|は|確信|を|持っ|て|言える|が|最初|から|信じ|て|など|いな|か|った|。」