
X,嗯,Twitter.com,现在正在阻止Bing 搜索,特别是Bingbot,在X 平台上抓取和访问Twitter.com 上发布的内容。 Twitter 特别在其robots.txt 档案中加入了一条指令,禁止Bingbot 抓取其平台上的内容。
这是它的萤幕截图 机器人.txt 档案:
我相信,这是迈克金利(Mike Ginley) 首先发现的,他将其发布在 X,「Twitter 屏蔽Bing 是一个有趣的举动…」Glenn Gabe 深入研究了时间线,注意到这是Bing 最近的一个变化:
截至7 月1 日,Bing 并未被阻止抓取。到9 月1 日,所有未明确包含在文件中的机器人都将被阻止。截至10 月17 日,Bing 已被明确屏蔽。出于显而易见的原因,网站查询在Bing 中揭示了Twitter 的一些非常奇怪的事情。 https://t.co/hWjKgxM9q7
— 格伦加布(@glenngabe) 2023 年10 月18 日
事实上,一个 现场指挥 Bing 上仅显示18 万个Twitter URL:
但对谷歌来说, 现场指挥 显示4.22 亿个URL。
早在7 月份,Twitter 就封锁了Google,导致Twitter 在Google 搜寻中的可见度大幅下降。几天后,推特撤销了这项变更。
我猜Twitter / X 不想要来自Bing 搜寻的流量?我的意思是,如果他们想要更有效率的索引,只需使用IndexNow 即可?
论坛讨论于 X。