取得するページは毎回全ページ取得している訳ではなく、
下記のいずれかの条件に合致したページを取得する仕組みとなっております。
A：クロール時に新規で取得したページ
B：前回の取得から15日経過したページ