猫山さんの日記

写真付きで日記や趣味を書くならgooブログ

Fessを試してみよう(24)Crawlerヒープ1.5Gでは不足

2022-07-18 | 日記

何も用事のない3連休だ、素晴らしい!
でも、電気工事士の対策本を読んで居眠りしてばかりいるせいか、
夜はよく眠れない。

FessのCrawlerジョブは次のように設定が固まり、先週の水曜から稼働している。
土 Crawler1

月 Crawler2

水 Crawler3

金 Crawler4、Thumbnail Purger

今日はCrawler2が稼働しているはずだ。
ちょっと様子を見てみよう。
あれ?13:30に終了している。
fess-Crawler.logを見てみるとOutOfMemoryエラーだ。
止まった箇所は、以前と同じ国保関係のファイル、ということは、
特定のファイルが悪さしているのかな?
いや、このCrawler2は前回は正常終了したので、そうではない。
fess-Crawler.logをOutOfMemoryで検索してみると、3か所も見つかった。
いずれもExcelファイルだ。
OutOfMemoryが出ても必ずしもジョブが停止するわけではないんだね。
Crawler1ジョブのログも見てみよう。
こちらは最後まで完走しているけれど、OutOfMemoryが2回記録されていた。
130万ファイルをクロールするには、
Crawlerのヒープサイズが1.5Gでは足りないのかな。
256m足して1.75Gで様子を見てみよう。