为什么我的的网站在360站长工具抓取不到任何信息呢

为什么我的的网站在360站长工具抓取不到任何信息呢 都显示抓取异常 下面是360点开详细返回的结果 以下是360搜索Spider抓取结果及页面信息 提交网站:www.xxxxxx.com 提交网址:http://www.xxxxxx.com/hd/jsjl/ 抓取UA:Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0); 360Spider 抓取时间:2016-09-05 15:08:29 网站IP:116.255.235.74 下载时长:0.005s 返回http头: HTTP/1.1 302 Found Server: Safedog/4.0.0 Location: /hd/jsjl/?WebShieldDRSessionVerify=U6yJkTQpBUHkf1KFniUu Content-Length: 0 Connection: Close Content-Type: text/html
亿弘 提问于2016-9-05 15:14 联系时间:任何时间
test2014 2016-11-07 17:24

1、robot.txt有没有禁止360爬虫

2、主机是否安装有安全软件(可能是安全软件屏蔽了爬虫)

3、主机防火墙关闭试下。

4、域名解析时间是否超过72小时。

好评
直戳题主的内心!
已解决
被浏览1468
在线客服