クロール禁止時間帯

曜日・時間帯を指定して、その時間はクロールしないようにします。

お客様サイトの繁忙時間帯を避けてクロールするために、曜日と時間帯を指定してクローラーの動作を停止できます。

クロール禁止時間帯とは

曜日ごとに「この時間はクロールしない」という時間帯を指定できます。指定した時間帯のあいだは、新しいページのクロールも、既存ページの更新クロールも停止します。指定した時間帯を過ぎると自動的にクロールが再開されます。

設定の特徴

  • 曜日ごとに、複数の時間帯を登録できます
  • 時刻は日本時間(JST) で指定します
  • 登録がない場合は24時間クロール可能です(デフォルト)
  • 各時間帯は同日内で指定します

設定手順

  1. 「クローラー」>「クロール禁止時間帯」ページを開きます
  2. 「時間帯を追加」ボタンで行を追加し、曜日・開始時刻・終了時刻を入力します
  3. 必要な分だけ時間帯を追加します
  4. 「設定を保存」ボタンを押します

設定例

平日の日中はクロールしない

曜日開始終了
09:0018:00
09:0018:00
09:0018:00
09:0018:00
09:0018:00

深夜0時をまたぐ時間帯(22:00〜翌06:00)を指定したい場合

日付をまたぐ時間帯は、2行に分けて登録します。

曜日開始終了
22:0023:59
00:0006:00

一時停止との関係

クローラーの一時停止とは独立した機能です。両方を設定している場合、どちらかの条件で停止と判定される時間帯はクロールされません

設定を保存してから反映されるまで、最大で数十秒かかる場合があります。保存直後に該当時間帯に入ってもクロールが続いているように見える場合は、しばらくお待ちください。