AIボットのクロール対象、過去1年間のコンテンツが約65%を占める。6年以上前のものは見向きもされず? – INTERNET Watch 2025年7月4日2025年7月19日ai AIボットによるクロール対象となるURLは、過去1年以内に公開された新しいコンテンツが約65%を占める一方、6年以上前のコンテンツはほぼ見向きもされないなど、大きな偏りがあることが明らかになった。