DNSPod设置搜索引擎蜘蛛回源方法

网站在上线之后,为了避免受攻击,我们通常会给网站套上CDN,个人站长一般会选择免费的CDN,如Cloudflare。在给网站加上CDN后,我们尝试访问网站域名,会访问到CDN随机分配的ip地址,这样就隐藏了网站源ip(避免网站受攻击)。

“Cloudflare可以帮助受保护站点抵御包括分布式拒绝服务攻击(DDoS, Distributed Denial of Service)在内的大多数网络攻击,确保该网站长期在线,同时提升网站的性能、访问速度以改善访客体验。”

但如果搜索引擎蜘蛛也直接访问CF(cloudflare的简称)获取随机ip,每次抓住的ip都发生变化,并且相对于蜘蛛直接抓取源站ip的平均耗时长,就会影响到蜘蛛对网站的抓取频次,不利于SEO优化。因此,就需要配置蜘蛛回源抓取。

本文介绍通过DNSPod设置蜘蛛回源的方法。

第一步 注册DNSPod账户

官网:https://www.dnspod.cn/

第二步 后台添加域名

图片[1] - DNSPod设置搜索引擎蜘蛛回源方法 - 长江博客
dnspod后台
图片[2] - DNSPod设置搜索引擎蜘蛛回源方法 - 长江博客
添加域名

第三步 更改域名dns

添加域名之后,如果域名之前在别的平台进行的解析,会显示“DNS不正确”,点击更改dns

图片[3] - DNSPod设置搜索引擎蜘蛛回源方法 - 长江博客
图片[4] - DNSPod设置搜索引擎蜘蛛回源方法 - 长江博客

第四步 添加线路分组(蜘蛛线路)

1)添加记录,选择线路类型,里面先添加线路分组

图片[5] - DNSPod设置搜索引擎蜘蛛回源方法 - 长江博客

2)蜘蛛线路选这几个,然后保存线路

图片[6] - DNSPod设置搜索引擎蜘蛛回源方法 - 长江博客

第五步 添加解析记录

1)添加A记录

线路选择刚才建立的线路分组,记录值为自己的服务器ip

图片[7] - DNSPod设置搜索引擎蜘蛛回源方法 - 长江博客

这样蜘蛛独立抓取的ip就设置成功了。

2)添加CNAME记录

不要忘记添加CNAME记录,对接到CDN(如cloudflare),挂个免费的CF隐藏ip。

图片[8] - DNSPod设置搜索引擎蜘蛛回源方法 - 长江博客

蜘蛛回源配置完成,可以实现访客通过CDN访问的同时,蜘蛛通过分组直接访问服务器源ip。

DNSPod专业版

免费版DNS可以尝试升级至专业版,建议购买dnspod专业版,更便宜的购买途径:

https://www.dnspod.cn/promo/domainscarnival?promo_code=S2N37CX622382H3U#anch_dnsPackage
图片[9] - DNSPod设置搜索引擎蜘蛛回源方法 - 长江博客

© 版权声明
THE END
喜欢就支持一下吧
点赞12 分享
评论 抢沙发

请登录后发表评论

    暂无评论内容