kiyoka.2004_10_17

[Sumibi] 辞書構築ツールからすこしずつ開発中

辞書構築ツールからすこしずつ開発中

辞書の構築ツールから作っています。SKKのラージ辞書をベースにしています。MySQLにSKKの辞書をそのまま読み込んで、コーパスからの単語の出現頻度を辞書に記録します。要するに単語の出現頻度DBを作っているわけです。変換エンジンは単純な１重マルコフ連鎖アルゴリズムを使う予定なので、bigram(連続する単語が連鎖して出現する頻度)も記録します。このままいくと、実際に変換アルゴリズムを試して遊べるのは、１２月くらいになりそうです。急がず楽しみながらぼちぼち作っていっております。

tDiaryのトラックバックスパム？

kiyoka日記に変なトラックバックが来るようになりました。どうやってリダクションするのでしょうか。もうちょっとtDiaryを使いこなさないと...