GET是打开方式,/index.asp为蜘蛛访问的你网站的页面,80是端口。
至于最后这个200 0 64,不同于200 0 0,说明蜘蛛已经访问了该页面,但并没有任何抓取也没有带回数据库。这种原因多为空间不稳定、服务器不稳定。不过也有人说这是K站的前兆,你要注意了。
这个问题,其实也并不是很全面,所谓的蜘蛛代码是指蜘蛛在你网站上所抓取的代码,如果上传了网络日志就能够通过查看日志上看到蜘蛛所爬行的页面。叫空间商将蜘蛛爬行日志上传到空间上吧,要看就下载出来看!302是有其他的地址已经存在于数据库中,所以搜索引擎蜘蛛不在索引。遇到这种情况,请注意两点,1、网站是否开启了泛域名解析,2、网站是否自定义404错误页,而这个404错误页的格式类型是否选用了“url”,而没有使用“文件”类型。如果采用了url,就要注意这个不能对应html文件,需要对应asp等动态文件,然后在这些文件中用代码让其返回404状态。以上信息来源于网络,并非原创。具体请自行搜索“百度蜘蛛爬行代码302”,查阅一些资料。
欢迎分享,转载请注明来源:夏雨云
评论列表(0条)