SemrushBot这种爬虫来抓取是好事吗

不是好事。

SemrushBot分析你站点，收集你站点信息的，可用于竞争对手分析数据，当然要屏蔽这些bot，不然被竞争对手反向查一下，内裤都掉出来了，关键还是个国外的软件，可以说这东西完全没用。

网站通过SEO优化在搜索引擎中的自然排名就叫SEO

SEO搜索引擎优化就是：通过SEO技术手段，让百度搜索引擎匹配出我们自己的内容，我们的内容被优先匹配，也就是占据第一页，而不是第二页、第三页。

当然第一页总共有10个位置，排序结果越往前，内容就会被更多用户看到，点击率当然就高。你会去点击10页以后，100页以后的内容吗，我想我没那么时间，除非你特别喜欢深度去找资料才会这么干。

网站SEO只是SEO中的一种存在形式之一，而SEO在实际运用和生活中涉及到的领域是很广泛的。你可以用SEO的思维方式去生活，学习，不仅限于做网站优化。

够累心的，看了你公司网站，感觉上基础性工作都还没有做好。

1）自动推送在站长平台后台有明确的解释，当页面被访问时，页面链接才会被自动推送给百度，有利于新页面更快被百度发现。简单地说，如果你的网站日均UV不高，自动推送给百度的网页也不会很多。在收录方面，建议主动推送、自动推送、sitemap三种方式都做。

2）基础性工作，包括TDK，页面代码优化，代码中与SEO相关的标签的使用，sitemap制作，移动化（转码限制，适配，代码中使用带移动特征的标签，合理的面包屑导航使用等）。

从你公司网站上来看，至少各类型页面title都存在关键词堆砌的情况（像杭州公司注册、杭州代理记账、工商注册、专利申请、杭州商标注册这些关键词一股脑写进title，分散关键词排名权重不说，title还出现重复），代码中H1~H4标签的使用混乱且滥用严重，同时对动态页面做了静态化调整，应该是生成的静态页面，但却尴尬地和动态URL一起共存，并且动态URL还不断地被百度爬虫抓取而偏偏收录不佳（重复页面的概念不多说了）。

3）采集垃圾内容的态度。企业站的内容受到自身限制，SEO能起到的作用有限，更多的是靠SEM或第三方平台的推广。对于采集的内容，要么就一开始就大量采集，找到足够多的采集源，确保每天都发布大量的相关性较强的内容等到流量起来后做转化。要么就不要采集，专心去做第三方平台的推广。随便采集点内容甚至把公众号上完全无营养的内容也放到PC上来就很尴尬了。

---