「uim : uim conference」記事へのコメント

そこまで間違ってはいないと思います

[Anonymous Coward]

こんにちは、吉田です。
僕の説明不足だったとは思うのですが、あれはポワソン分布の単調増加部分しか利用しないのが一番性能が良かったということを通して、文節長が長い物を優先すべきだということを示したつもりでした（これは明らかなことではないはずですし）。

Re:そこまで間違ってはいないと思います

[kanou (16482)]

やっぱりいろいろやってらっしゃるんですね。実用的な見地から言うと、現在既にかなり最適化されていて、遷移行列を実データから得られた条件つき確率に置き換えても、さほど性能向上は望めないのではないかと思います。
それよりむしろ、文節クラスをどのように分けるべきか、単語頻度による評価とのすり合わせをどうするべきかを工夫した方が得る所が多いような気がします。ここはいわゆる「職人芸」が必要になってしまうと思いますが。