
法布里斯·卡内尔 张贴 针对使用基于订阅和付费墙内容的网站的SEO 最佳实践帖子。虽然谷歌有一个叫做灵活抽样的东西,但以前是第一次点击免费程序——微软必应没有。
Bing 基本上希望您检测到BingBot 正在尝试访问此基于订阅的付费墙内容,然后授予BingBot 对该内容的完全访问权限。从某种意义上说,向Bing 显示所有内容,而只向用户显示内容的片段。 Bing 说这没关系,这不是一种伪装形式,这是允许的。
Fabrice 写道:“第一步是允许像Bing 这样的搜索引擎查看通常位于付费墙或订阅后的完整内容。通过访问完整内容,搜索引擎将能够索引更多文本,这将有助于匹配更多内容。客户查询。” “您可以通过将IP 地址与Bingbot IP 地址的公共列表进行对比来识别Bingbot,”他补充说。微软最近发布了BingBot IP 列表。
然后,Fabrice 解释说下一步是“防止搜索引擎在搜索引擎缓存页面中暴露基于出版商订阅或付费墙的内容”。他帮助“发布者可以控制搜索引擎是否显示文档的缓存页面,方法是在网页的头部使用特殊的机器人元标记,或者使用返回给搜索引擎爬虫的客户HTTP 响应标头为每个网址。”
他的博客文章解释了如何执行此Robots Meta Tag 和/或X-Robots-Tag。
新闻网站、学术和研究网站,在搜索引擎中启用基于订阅和付费墙内容的索引很容易。让更多客户访问您的网站,而无需使用搜索引擎。 https://t.co/P8VSJcfewB
-Fabrice Canel (@facan) 2022 年5 月2 日
然后他解释了为什么他们不采用谷歌的方法:
JSON-LD 可以提供帮助,但对我来说不是很强的要求。这偶尔会被滥用,通过问题实现,JSON-LD 解决方案不适用于二进制文件作为基于订阅的学术PDF 文件,这是一种常见情况。
-Fabrice Canel (@facan) 2022 年5 月3 日