工作室注册登录标签云赞助光荣榜

当前位置:首页 > 全栈分享 > SEO > 正文

实锤!网站境外线路开启Cloudflare加速会导致Bing抓取网站地图失败

发布时间:2025-05-13 23:31:45作者:魏义齐阅读:()评论:

本文为博主原创文章,未经博主允许不得转载、摘编或利用其它方式使用本博客内容。

要知道Bing在国内的流量是谷歌的几十倍,再加上百度对个人网站及其不友好,所以我最近一直在做Bing的seo,用了IndexNow推送工具后效果确实不错,但最近向Bing推送的文章连着两篇抓取失败,昨天晚上网站地图重新提交了好几次,没有一次是抓取成功的。之前只是偶尔一两篇抓取失败,我就当是Bing抽风了,但连着失败那就证明是出问题了。

我是这么排查的:

1.去谷歌站长平台测试网站地图能不能抓取成功,结果是成功的,那说明可能不是境外线路开启Cloudflare加速导致的。

2.重新检查解析、绑定和权限等。

3.上一步没有问题后暂停境外线路解析,清除Cloudflare节点上的所有缓存。国内多吉云cdn切换回中国境内加速,状态正常后,清除所有缓存。用站长工具的国际网速测试工具测速,发现海外解析全部超时,此时我突然想到换服务器后Cloudflare那边加速域名weiyiqi.top的解析ip没改,我满心欢喜以为找到了问题,ip修改后重新启用境外线路解析,用国际网速测试工具测试确认全是Cloudflare节点后,再次重新提交网站地图,但依然是抓取失败。这就证明不仅仅是ip没改的问题,我猜测的境外线路解析也有这方面原因。

4.确认多吉云cdn没有开启全球加速且海外节点没有缓存的情况下,再次暂停weiyiqi.net的境外线路解析,并清除Cloudflare节点上的所有缓存后,重新提交网站地图,结果是秒级抓取成功。注意:不仅仅是抓取成功,而且处理的速度非常快。之前只有多吉云cdn开启全球加速的情况下,网站地图也可以抓取成功,但处理速度非常慢,长达几分钟。

5.确定是境外线路开启Cloudflare加速影响的后,如果国内cdn比如多吉云开启全球加速呢?继续测,多吉云开启全球加速后,用VPN切换至海外ip,手动访问命中缓存并用curl命令验证,再次重新提交网站地图,问题恢复——抓取失败。

也就是说国内cdn开启全球加速后也影响Bing对网站地图的抓取,但影响不大,只是偶尔抓取失败,我之前那两个一直抓取失败的就是例子。此处提一句,Bing对于第一次抓取失败的,若再次提交不管提交多少次都是不抓的(除非你把问题解决了),“上次抓取时间”一直停留在第一次抓取失败的时候,而境外线路开启Cloudflare加速后Bing对网站地图的抓取是100%失败的。

第三步到第五步的排查我至少重复过两次,大家可以100%相信我的结论。目前我的方案是:海外线路解析暂停,只在遭受境外攻击时一键启用解析。

境外线路解析暂停

如果不相信我的结论,可以自己去Bing站长平台测试,或者看看那些境外线路开启Cloudflare加速的在Bing收录怎么样。

本文标签:,您可以阅读与「」相关的所有文章

魏义齐全栈技术交流:魏义齐全栈技术交流群

上一篇:Bing的IndexNow是什么?怎么用?下一篇:实测,谷歌站长平台的“测试实际网址”对收录展现大有好处

原创不易,您的赞助就是博主更新的动力!

赞助请备注,8.88元及以上可在赞助光荣榜留下外链信息。

HashOver畅言云评完全自托管的评论系统

工作室注册登录标签云赞助光荣榜

最新会员
  • 东方星雨
  • deanhan
  • 1264822519
  • aini3311
  • a1051020101
  • weiyiqi