很多网站在被攻击的时候会选择高防服务器,或者高防CDN进行防御,有时候接入高防服务器或者高防cdn之后会导致搜索引擎抓取失败,那么如何操作操作才会既能接入高防cdn又不会影响搜索引擎蜘蛛抓取。
方法一:
通过DNS解析来实现,可以参考下图。
一般情况下DNS会带有搜索引擎线路解析实现蜘蛛回源,比如常见的阿里云解析、dnspod都支持单独的搜索引擎解析,如果使用了高防cdn,都可以直接添加一条搜索引擎解析到服务器IP,这样既不会暴露IP,又完全不影响搜索引擎回源,做到一举两得,如果后期更换服务器的时候也一定记得要修改,不然会一直抓取旧服务器IP(造成不必要的损失)。
尊云的CDN系统拥有各大搜索引擎蜘蛛白名单机制,并且定期维护白名单IP,针对真正的搜索引擎蜘蛛抓取,会直接放行回源,不会对搜索抓取造成影响。
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至2705686032@qq.com 举报,一经查实,本站将立刻删除。原文转载: 原文出处: