服务器开启gzip后是否会影响蜘蛛抓取网站和蜘蛛的收录量？
2014-09-24 浏览：150
服务器爱妻gzip压缩，不会对spider抓取产生影响，我们会以压缩的方式来抓取，并且也能够节省站点的网络流量。
正常情况下是有利无害的，但是服务器如果有问题gzip可能会导致百度抓取失败，从而引发一系列问题。像硬防、GZP、CDN、DNS主动防御等，本身并没有问题，但是技术出现错误就会出现各种问题，比如前段时间的新闻美橙互联的DNS服务器检测自动防御时，误把百度蜘蛛IP当做恶意IP屏蔽了，导致客户网站被K。所以站长在启用相关功能时，一定要谨慎小心。