Google 的 John Mueller 表示,如果网站 Search Console 报告中 30-40% 的 URL 返回 404 错误,这很正常。
这是在 2 月 25 日的 Google Search Central SEO 视频群聊中说明的,我们还了解到,无法阻止 Google 尝试抓取不再存在的 URL。
Google 可能会在 URL 从网站上删除多年后继续尝试抓取这些 URL,并且网站所有者无法采取任何措施来防止这种情况发生。
因此,即使是最勤奋的 SEO,404 也是不可避免的。
本周,一位名叫 Robb Young 的 SEO 提出了一系列问题,这些问题从穆勒那里得到了这些信息。
Young 有一个网站在 Search Console 中返回 404 以获取 8 年未使用的 URL。 这些 URL 以前是 410’d 并且没有指向它们的链接。
他想知道这是否正常。 这是穆勒的回应。
John Mueller 谈 Googlebot 抓取旧网址
Mueller 说 8 年仍然是抓取不存在的 URL 的很长一段时间,这并非不可能。
如果 Google 发现某个 URL 过去是有效的,那么它可能会不时尝试再次抓取该 URL。
如果您知道该网址不存在,那么您可以在 Search Console 报告中忽略它。
“七八年听起来真的很长……如果这是我们过去看到的东西,那么我们会不时尝试重新抓取它。
我们会告诉你:“哦,这个 URL 不起作用。” 如果你喜欢:“好吧,它不应该起作用。” 那就完全没问题了。”
在一个后续问题中,Young 询问是否有任何方法可以向 Google 发出更强烈的信号,表明这些 URL 不再存在。
Google 会停止尝试抓取已删除的网址吗?
“我认为你不能保证我们至少不会尝试 [to crawl] 那些网址。 这是我们在系统中拥有它们的东西之一,我们知道它们在某些时候很有用,所以当我们有时间时,我们会重新尝试它们。
它不会引起任何问题。 只是,我们重试了它们,我们向您展示了一份报告并告诉您,“哦,我们重试了,但它没有用。”
Young 在他的 Search Console 报告中担心 404 的数量,于是又向 Mueller 提出了一个后续问题。
他澄清说,不仅仅是少数 URL 返回 404 错误,报告中大约 30-40% 的 URL 有 404 错误。
是 那 普通的?
“那完全没问题。 这是完全自然的,尤其是对于一个有很多流失的网站。 如果它就像一个分类网站,您在其中分类了有效期为一个月的列表,那么您希望这些列表会退出。 然后我们,就像,多年来,我们收集了大量的这些 URL 并再次尝试它们。 如果他们返回 404 或 410 之类的,无论如何。 完全没问题。
我不认为这对我们来说是不寻常的。 我们不会将其视为质量信号或任何东西。 我认为 404 对我们来说开始出现问题的唯一时间是主页开始返回 404。 那么我们可能会遇到这样的情况:“哦,我不知道这个网站是否真的还在运行。”
但是,如果网站的某些部分是 404,比如,无论如何。 这就像一个技术问题,就像,没关系。”
Google 可以在 URL 被删除后很长时间内记住它们,并且可能随时尝试重新抓取它们。 但是,当您在 Search Console 中看到本不应该存在的 URL 的 404 错误时,无需担心。
在下面的视频中听到穆勒的完整回应:
window.addEventListener( 'load', function() { setTimeout(function(){ striggerEvent( 'load2' ); }, 500); });
window.addEventListener( 'load2', function() {
if( sopp != 'yes' && addtl_consent != '1~' ){
!function(f,b,e,v,n,t,s) {if(f.fbq)return;n=f.fbq=function(){n.callMethod? n.callMethod.apply(n,arguments):n.queue.push(arguments)}; if(!f._fbq)f._fbq=n;n.push=n;n.loaded=!0;n.version='2.0'; n.queue=[];t=b.createElement(e);t.async=!0; t.src=v;s=b.getElementsByTagName(e)[0]; s.parentNode.insertBefore(t,s)}(window,document,'script', '
if( typeof sopp !== "undefined" && sopp === 'yes' ){ fbq('dataProcessingOptions', ['LDU'], 1, 1000); }else{ fbq('dataProcessingOptions', []); }
fbq('init', '1321385257908563');
fbq('track', 'PageView');
fbq('trackSingle', '1321385257908563', 'ViewContent', { content_name: 'google-fine-if-30-40-of-urls-in-search-console-are-404s', content_category: 'news seo' }); } });