月燈火は複数の推奨ページ選択機能を持ってはいますが、ユーザベースが少ない現状では文書の類似性をもとに選択する方式を一番強く効かせています。 この方式、上手く動いてはいるのだけど同じ事を述べる記事を無闇に取ってきてしまう問題がある。たとえば先…

先日のメンテナンスで、月燈火の文書要約エンジンを新しくしました。アルゴリズムは前と同じTF-IDFで変わってないけど文の分割部とか細かな改良を入れてます。併せて単語出現頻度表も新しい物に入れ替えてます。元になるコーパスの文書数は10万を越えました…