在对robots的定义中就明确指出,当我们不希望搜索引擎收录网站的部分,请建立robots文件(Disallow:/aaa/)。
在我们遇到的问题中,最多的是当我们购买了一个虚拟主机,空间自带了一个二级域名地址,而这个地址在搜索引擎上已经收录,我们想禁止掉它的继续收录。最直接的办法就是站内开放的链接上要统一url规范,不要给不想收录的二级域名任何的入口,然后持续的更新一些信息,搜索引擎会逐渐自然把二级域名剔除。
当然我们有条件也可以在代码中写,判定访问的是二级域名的时候跳转到应用的主域名上;我们也可以直接把二级域名做301重定向到主域名上,在此搜想SEO专家提醒您,如果是搜索引擎已经将二级域名识别为主域名持续收录,做此之前一定要把站内所有的链接地址改为主域名,不要再有任何二级域名入口,如果信息收录过多,我们并不建议大家采用此方式。
当然,还有一招,直接去百度提交删除申请,邮箱为:webmaster@baidu.com
如果对于二级域名与主域名不是同一目录的情况,这就非常简单,我们都知道的“直接在robots里书写禁止二级域名对应的目录”即可!
禁止某个二级域名的搜索引擎收录针对不同的情况,当然还有其它一些方法,举一反三、活学活用。对于二级域名与主域名为同一目录的情况下,搜想SEO专家一定要提醒大家的是,我们切不可为了屏蔽二级域名,直接在二级域名的指向的目录里书写了robots禁止收录文件。我们很多人却会犯这样的“傻”。
首先,你要明白robots文件怎么写!一般允许抓取的话是allow:/www/xxx/
如果是不允许的话就是:disallow:/www/xxxx/
你如果想禁用你的二级网站的话,只需要禁用二级网站所在的文件夹就好了!例如,你的二级网站所在的文件夹是/erji/
那么,你就可以在robots加入:
disallow:/www/erji/ 就可以了!
欢迎分享,转载请注明来源:夏雨云
评论列表(0条)