WindowsでZIP版のFESS 14.6を使用しています。
playwrightを利用すればDocsifyで作られたサイトをクロールできるのかなと試しています。
以下のパラメータでクロールしたところ、エラーが発生しました。
URLなどのパラメータの指定が悪いのか、playwright向けの環境設定が不足しているのか、よくわかっていないです。
何か分かったりしますでしょうか?
URL: https://docsify.js.org/#/
クロール対象とするURL: https://docsify.js.org/#/.*
設定パラメーター: client.crawlerClients=playwright:http://.,playwright:https://.*
スレッド数: 1
間隔: 10000 ミリ秒
org.codelibs.fess.crawler.exception.CrawlerSystemException: Failed to access https://docsify.js.org/#/
at org.codelibs.fess.crawler.client.http.PlaywrightClient.execute(PlaywrightClient.java:227)
at org.codelibs.fess.crawler.CrawlerThread.run(CrawlerThread.java:154)
at java.base/java.lang.Thread.run(Thread.java:833)
Caused by: org.codelibs.fess.crawler.exception.ChildUrlsException: Threw child urls(0). #crawledUrlNotTarget