Bulkfeeds: チューニングと機能制限

Bulkfeeds の負荷が日に日に高くなり、定期メンテナンスのゴミ掃除でもなかなか改善されずご迷惑をおかけしてます。

本日一部の機能制限とパフォーマンスチューニングを行いました。

- データベースのパラメータを少しいじりました（メモリ割り当てが大きすぎて Swap していたのを改善）。
- search2 の検索結果および RSS 内のフィードリンクを削除しました（使い勝手に影響はないと思います）。
- 負荷が高い /app/search, /app/daily は一時停止しました。search については前方検索のみ、daily については静的出力にて近々に対応します。

まだ Bloglines 来襲時には 4-5秒かかってしまいますが、以前よりは改善したかとおもいます。

今後、根本的な対策（インデクシングのステップ削減、RSS フィードや Similarity Search のホスト変更、データベースのレプリケーション） を順次行っていく予定です。基本的に Web からみえる部分はほぼリアルタイムに、フィード (RSS, JavaScript) で出てくる部分は若干タイムラグがあってもOK、という方針でできれば理想ですね。

しかし依然としてアクセスのほとんどが Bloglines, Googlebot, Yahoo! Slurp, lwp-trivial という状況 :-)