在对robots的定义中就明确指出,当我们不希望搜索引擎收录网站的部分,请建立robots文件(Disallow:/aaa/)。
在我们遇到的问题中,最多的是当我们购买了一个虚拟主机,空间自带了一个二级域名地址,而这个地址在搜索引擎上已经收录,我们想禁止掉它的继续收录。最直接的办法就是站内开放的链接上要统一url规范,不要给不想收录的二级域名任何的入口,然后持续的更新一些信息,搜索引擎会逐渐自然把二级域名剔除。
当然我们有条件也可以在代码中写,判定访问的是二级域名的时候跳转到应用的主域名上;我们也可以直接把二级域名做301重定向到主域名上,在此搜想SEO专家提醒您,如果是搜索引擎已经将二级域名识别为主域名持续收录,做此之前一定要把站内所有的链接地址改为主域名,不要再有任何二级域名入口,如果信息收录过多,我们并不建议大家采用此方式。
当然,还有一招,直接去百度提交删除申请,邮箱为:webmaster@baidu.com
如果对于二级域名与主域名不是同一目录的情况,这就非常简单,我们都知道的“直接在robots里书写禁止二级域名对应的目录”即可!
禁止某个二级域名的搜索引擎收录针对不同的情况,当然还有其它一些方法,举一反三、活学活用。对于二级域名与主域名为同一目录的情况下,搜想SEO专家一定要提醒大家的是,我们切不可为了屏蔽二级域名,直接在二级域名的指向的目录里书写了robots禁止收录文件。我们很多人却会犯这样的“傻”。
1.如果你是一个网站有多个二级域名,那么只需要确定主要用的一个二级域名,把其它的二级域名做301转向该域名,时间长了自然就不会收录除主二级域名以外的域名了
2.
如果你是多个网站各自拥有自己的二级域名,那么需要在网站的主目录做robots.txt文件,进行限制百度蜘蛛或者其它蜘蛛的爬行收录!
欢迎分享,转载请注明来源:夏雨云
评论列表(0条)