discuss
1
(from osdn.net/users/wasabi1975)
たびたび申し訳ございません。
全般の設定で、システム全体の同時クロール数を設定できますが、
クローラーごとに最大接続数を設定できると助かります。
全体の接続数が「5」だとしたとき、
全URLをゆっくり巡回するDefaultCrawlerの接続数を「1」
巡回先を絞って頻度を上げたサイト別クローラーを「4」など
設定したいと考えております。
このほか、小さな点でありますが、
・クローラーの一覧表示数が25件で固定ですが、プルダウンで25~200ぐらいまで選べる
をお願いできないでしょうか。
ご検討お願いいたします。
discuss
2
(from osdn.net/users/shinsuke)
クローラごとのスレッド数は
全般の設定
と
ウェブクロールの設定
の掛け合わせになります。
DefaultCrawlerはデフォルトのクローラのジョブになるので、
そのような要件の場合にはクローラのジョブを分けて、
クロール設定のスレッド数で調整してください。
クロール設定のジョブはクロール設定の詳細からジョブを
作成することができます。
・クローラーの一覧表示数が25件で固定ですが、プルダウンで25~200ぐらいまで選べる
次のバージョンで設定で変更できるようにしたいと思います。