
Glenn Gabe 指出,他最近看到了一些奇怪的Google Googlebot 活动,称他看到从1 月12 日到1 月13 日开始的“多个网站的爬行高峰”。然后我检查了一些属性,并注意到在某些属性上,而不是大多数属性上,我看到了相同的结果。
所以要明确的是,这并不是在所有网站上都有,事实上,它似乎只在我个人可以访问的属性中不到10%。但这是谷歌的不寻常行为。您可能会在网站上到处看到这种情况,尤其是在网站发生重大技术更改的情况下。但通常情况下,当没有像这样的大变化时,你不会看到它。
这是格伦分享的截图之一 推特:
Glenn Gabe 补充说:“对于大多数峰值,它们属于“刷新”与“发现”,这是有道理的……但仍然值得注意。对于某些智能手机和桌面峰值。
其他人也看到了:
澄清一下,我并不是说这是*坏*的事情。有趣的是,从同一天开始,在许多网站上都出现了巨大的爬网高峰。 🙂 如果Google 从抓取的角度在那里实施了任何更改,将会很有趣。
—格伦·加布(@glenngabe) 2022 年1 月18 日
在我可以访问的少数属性中看到了这个,但是,是的,超级奇怪 pic.twitter.com/9SQqGtWTJ6
— 巴里·施瓦茨(@rustybrick) 2022 年1 月18 日
我也注意到了。有趣的是(而且有点低估),我注意到25% 的Googlebot 类型是“页面资源负载”。我从来没有见过它高于8%,通常在3% – 4% 左右。知道为什么格伦会这么高吗? pic.twitter.com/BBOKeb8Odq
——克里斯·安斯沃思(@chrisains) 2022 年1 月18 日
您可以在这里查看您的抓取统计报告,如果您也看到了这个高峰,请告诉我们?
只是提醒一下,谷歌表示抓取率的大幅增加与算法更新无关,尽管有时它可能是- 也许。
论坛讨论在 推特.
更新:1 月21 日,似乎高峰期结束了?
继“2022 年1 月的大抓取高峰”之后,我看到抓取请求大幅下降,在受影响的网站上恢复到正常水平。因此,如果您的网站发生这种情况,请立即检查您的统计数据。我希望我们能从Google 那里得知这是怎么回事。敬请关注。 pic.twitter.com/SzCJ2YR3zO
—格伦·加布(@glenngabe) 2022 年1 月21 日
更新:1 月24 日,我们又来了?
请注意,“2022 年1 月的大爬行高峰”尚未完成。在短暂恢复正常后,我看到它再次飙升。不知道发生了什么,但要么是Googlebot 超载,要么存在报告故障……敬请期待。 pic.twitter.com/whOgsrqMmQ
—格伦·加布(@glenngabe) 2022 年1 月24 日