实锤!网站境外线路开启Cloudflare加速会导致Bing抓取网站地图失败
发布时间:2025-05-13 23:31:45作者:魏义齐阅读:()评论:
本文为博主原创文章,未经博主允许不得转载、摘编或利用其它方式使用本博客内容。
要知道Bing在国内的流量是谷歌的几十倍,再加上百度对个人网站及其不友好,所以我最近一直在做Bing的seo,用了IndexNow推送工具后效果确实不错,但最近向Bing推送的文章连着两篇抓取失败,昨天晚上网站地图重新提交了好几次,没有一次是抓取成功的。之前只是偶尔一两篇抓取失败,我就当是Bing抽风了,但连着失败那就证明是出问题了。
我是这么排查的:
1.去谷歌站长平台测试网站地图能不能抓取成功,结果是成功的,那说明可能不是境外线路开启Cloudflare加速导致的。
2.重新检查解析、绑定和权限等。
3.上一步没有问题后暂停境外线路解析,清除Cloudflare节点上的所有缓存。国内多吉云cdn切换回中国境内加速,状态正常后,清除所有缓存。用站长工具的国际网速测试工具测速,发现海外解析全部超时,此时我突然想到换服务器后Cloudflare那边加速域名weiyiqi.top的解析ip没改,我满心欢喜以为找到了问题,ip修改后重新启用境外线路解析,用国际网速测试工具测试确认全是Cloudflare节点后,再次重新提交网站地图,但依然是抓取失败。这就证明不仅仅是ip没改的问题,我猜测的境外线路解析也有这方面原因。
4.确认多吉云cdn没有开启全球加速且海外节点没有缓存的情况下,再次暂停weiyiqi.net的境外线路解析,并清除Cloudflare节点上的所有缓存后,重新提交网站地图,结果是秒级抓取成功。注意:不仅仅是抓取成功,而且处理的速度非常快。之前只有多吉云cdn开启全球加速的情况下,网站地图也可以抓取成功,但处理速度非常慢,长达几分钟。
5.确定是境外线路开启Cloudflare加速影响的后,如果国内cdn比如多吉云开启全球加速呢?继续测,多吉云开启全球加速后,用VPN切换至海外ip,手动访问命中缓存并用curl命令验证,再次重新提交网站地图,问题恢复——抓取失败。
也就是说国内cdn开启全球加速后也影响Bing对网站地图的抓取,但影响不大,只是偶尔抓取失败,我之前那两个一直抓取失败的就是例子。此处提一句,Bing对于第一次抓取失败的,若再次提交不管提交多少次都是不抓的(除非你把问题解决了),“上次抓取时间”一直停留在第一次抓取失败的时候,而境外线路开启Cloudflare加速后Bing对网站地图的抓取是100%失败的。
第三步到第五步的排查我至少重复过两次,大家可以100%相信我的结论。目前我的方案是:海外线路解析暂停,只在遭受境外攻击时一键启用解析。
如果不相信我的结论,可以自己去Bing站长平台测试,或者看看那些境外线路开启Cloudflare加速的在Bing收录怎么样。
上一篇:Bing的IndexNow是什么?怎么用?下一篇:实测,谷歌站长平台的“测试实际网址”对收录展现大有好处
原创不易,您的赞助就是博主更新的动力!

赞助请备注,8.88元及以上可在赞助光荣榜留下外链信息。
完全自托管的评论系统
-
东方星雨
-
deanhan
-
1264822519
-
aini3311
-
a1051020101
-
weiyiqi
- 百度搜索资源平台链接提交sitemap状态一直是等待是什么原因(1270)
- 百度搜索资源平台移动专区新增和完善模块解读(1055)
- 修改域名dns和换服务器会影响网站收录吗?(705)
- 各大搜索引擎是如何对待改版网站的?(655)
- 什么是“泡沫流量”,有什么好处和坏处?(612)
- 是时候写一篇关于网站收录的文章了(598)
- 保证文章快速收录的三个方法(569)
- 网站提升排名的几个小方法(504)
- 我是怎样以“佛系seo”的方式把“个人博客”做到首页的(473)
- 一个典型的营销案例——dedecms收费(428)
- 实测,谷歌站长平台的“测试实际网址”对收录展现大有好处(2025-05-22)
- 实锤!网站境外线路开启Cloudflare加速会导致Bing抓取网站地图失败(2025-05-13)
- Bing的IndexNow是什么?怎么用?(2025-04-18)
- 一个典型的营销案例——dedecms收费(2021-10-03)
- 各大搜索引擎是如何对待改版网站的?(2021-09-17)