网站打不开，蜘蛛还会来吗？
贺贵江：短期打不开，请使用503错误来提示搜索引擎，时间长了的话，会影响的，因为长期打不开就相当于被屏蔽了。
“网站打不开，蜘蛛还会来吗？” 的相关文章
网站的搜索引擎蜘蛛抓取越多越好？事实未必2022年04月01日 20:20:22
如何和搜索引擎爬虫对话2022年04月27日 10:56:05
360浏览器模拟百度搜索引擎蜘蛛访问2022年05月04日 11:13:50
Chrome浏览器模拟百度蜘蛛访问2022年05月04日 11:24:28
apache、iis6、ii7独立ip主机屏蔽拦截蜘蛛抓取（适用vps云主机服务器）2022年05月04日 12:38:32