如果站点临时关闭,当网页不能打开时,不要立即返回404 ,建议使用503状态。503可以告知百度spider该页面临时不可访问,请过段时间再重试。如果百度spider对您的站点抓取压力过大,请尽量不要使用404 ,同样建议返回503。这样百度spider会过段时间再来尝试抓取这个链接,如果那个时间站点空闲,那它就会被成功抓取了。
百度这里没有说过段时间是间隔多久,也没有说网站使用503返回码多长时间后百度不再抓取网页。我的建议还是在返回503状态码后还是尽快恢复访问,搜索引擎肯定不会有多大的耐性。
反悔503是好事情 你网站短时间打不开的问题
从代码上来看,304代码表示没有更新内容,久而久之搜索引擎来的频率自然会下降,导致的结果是收录慢,排名和权重提升困难。除了日常更新,还得检查网站结构是否合适。
不排除服务器设置错误,我看到有相当一部分的网站设置都不正确。
请检查下内容质量和网站结构,服务器设置。
注意,不是说内容天天更新就是好的,如果是抄袭的,更新再多也没意义
在网站seo优化的过程中常常需要通过一个名为robots.txt的文件与搜索引擎蜘蛛对话。通常来讲,搜索引擎蜘蛛爬行到某一个网站就会首先读取该文件,并按照文件中的规则执行接下来的行为。当一个网站中有一些网站不需要被搜索引擎收录时,往往就会通过robots.txt来限制搜索引擎蜘蛛对这个网页的抓取。网站robots.txt中对某个网页屏蔽了蜘蛛的收录,但搜索引擎还是会对该网页进行抓取,只不过在相关搜索结果中不会展现这些网页内容。所以robots.txt对搜索引擎优化有一定的影响的,在搜索引擎的结果中不会显示你的网站页面的相关内容。欢迎分享,转载请注明来源:夏雨云
评论列表(0条)