SemrushBot这种爬虫来抓取是好事吗

不是好事。

SemrushBot分析你站点，收集你站点信息的，可用于竞争对手分析数据，当然要屏蔽这些bot，不然被竞争对手反向查一下，内裤都掉出来了，关键还是个国外的软件，可以说这东西完全没用。

优化SEM广告最好方法是优化您网站进入页面的表现.

1 、采取有效的关键词组织策略

2 、强化从关键词到进入页面的信息[2]

3 、进行测试，寻找更适合您页面的选择以数据验证您的策略

关键词策略

模糊关键词—产生更多结果，但转化率较低.模糊关键词将访问者带到内容较宽泛的进入页面.采用模糊关键词搜索正如撒渔网一般。

精确关键词—产生的结果较少，但可能转化率较高。精确的关键词将访问者带到内容较专一的进入页面。使用精确关键词正如娴熟的精准射击。

从关键词到进入页面

客户出于战略目的开始增加网站访问量时，对起欢迎作用的进入页面进行优化就变得更加重要。在对进入页面、吸引访问者的链接和广告进行优化时，需考虑三个关键因素：

1 、标题—文本中的标题应与进入页面中的标题匹配。

2 、价值宣传—简要陈述产品或服务的优势所在，访客可望从此网 站获得什么？

3、 呼吁行动—希望潜在客户做些什么？

目标页测试

许多公司将搜索用户带到其公司主页。这样做就一定是最好的办法吗？还与其他更好的选择吗？能设计出内容更专一的策略性进入页面吗？客户必须通过以下测试才知道网页内容是否仍然相关。

1 、围绕一个问题设计测试（这是测试成功与否可度量的关键标准）

2 、确保被测试元素间存在清晰易见的差异

3、采用更多测试细化所得结果（A/B测试 和多变量)

4、临时行为变化的原因(考虑周末与工作日广告差异)

5、根据测试结果,采取行动!(把转换率更高的页面应用到目标页)

SEM解决方案

1.关键字咨询分析

我们的专家将从评估客户网站的当前质量着手，罗列最为合适的关键字及相关内容供客户参考。一般企业关键词的选择通常可分为核心关键词和衍生关键词。核心关键词是指对主要产品的定位，而衍生关键词是对核心关键词的补充。

2. 竞争对手分析

在搜索引擎上，有些关键词的竞争异常激烈，因此我们的专家会按以下内容对客户的竞争对手网站进行全面分析，包括：竞争对手的网站设计、页面被搜索引擎收录情况、拥有的其它域名和网站等等。通过这些分析，可以清楚地了解客户竞争对手采用的网络营销策略，从而制订有针对性的网络推广计划。

3.内容构建

我们的专家将为客户制定一个完备的关键字密度和营销方案，并且在网站上线前与客户保持密切沟通，以确保获得最佳效果。

4.网站重构

我们的专家将对客户网站进行整合，使之包含恰当的关键字以符合搜索引擎的工作原理。同时，包括页面设计、meta标签、alt标签、图片说明、内部链接结构和子页面在内的多项内容，都将被优化，使之更能吸引搜索引擎爬虫，更符合搜索引擎的算法。

5.链接开发

我们的专家将客户网站和一些PR值高的网站建立链接，从而大幅提高网站重要性。

6.网站提交

在网站自身优化工作完成后，我们的专家将会把客户网站提交到各大搜索引擎上，如Google、Baidu、Yahoo、AOL、MSN等，以及一些知名收费目录，如Yahoo目录、微软目录等。

7.报告

在网站优化完成后，我们的专家将给出一份详尽的报告，包括站点搜索流量统计、客户转化率统计等，这些都可以让客户充分看到优化效果。并在接下来的30天内，每天向客户通报相关数据，以便更好地评估整个项目。

方法分析

1关键字分析:从评估网站的当前质量着手,罗列最为合适的关键字及相关内容供参考。一般关键词的选择通常可分为核心关键词和衍生关键词。核心关键词是指对主要产品的定位,而衍生关键词是对核心关键词的补充。

2.竞争对手分析:在搜索引擎上,有些关键词的竞争异常激烈,因此会针对竞争对手网站进行全面分析,包括:竞争对手的网站设计、页面被搜索引擎收录情况、拥有的其它域名和网站等等。通过这些分析,可以清楚地了解竞争对手采用的网络营销策略,从而制订有针对性的网络推广计划。

3.内容构建:将为制定一个完备的关键字密度和营销方案,并且在网站上线前确保获得最佳效果。

4.网站重构:将对网站进行整合,使之包含恰当的关键字以符合搜索引擎的工作原理。同时,包括页面设计、meta标签、alt标签、图片说明、内部链接结构和子页面在内的多项内容,都将被优化,使之更能吸引搜索引擎爬虫,更符合搜索引擎的算法。

5.链接开发:将网站和一些PR值高的网站建立链接,从而大幅提高网站重要性。

6.网站提交:在网站自身优化工作完成后,将会把网站提交到各大搜索引擎上,如百度和谷歌(Google)等。

7.报告:在网站优化完成后,将给出一份详尽的报告,包括站点搜索流量统计、用户转化率统计等,这些都可以让充分看到优化效果。并在接下来的30天内,每天分析相关数据,以便更好地评估整个项目的营销效果。搜索引擎营销(SEM)流程,分析明确网站要达到何种目的。例如推广开放平台中的某种应用。

8.市场调查:要弄清人们是怎样搜索到网站的。具体包括调查常用关键词,挖掘尚未被竞争对手意识到的性价比高的关键词,调查竞争对手在做什么,应该怎样做搜索引擎广告,哪些网站最值得去争取链接。

SEM优势

SEM所做的就是全面而有效的利用搜索引擎来进行网络营销和推广。SEM追求最高的性价比，以最小的投入，获最大的来自搜索引擎的访问量，并产生商业价值。

SEM可以在搜索引擎中进行品牌的维护，将品牌的负面信息尽可能少的呈现在搜索用户面前，可以预防竞争对手在网络上恶意的诬陷。同时可以在进行正面和商业信息的推广，进而达到品牌推广的目标。

* 让寻求您的产品或服务的客户看到您的广告，实现精准受众

* 全面控制广告预算，可以自由设定每日预算与每日推广时间

* 采用CPC按每次点击付费模式进行结算，轻松制作和修改广告

随着SEM在全球范围内的普遍应用以及在中国的迅速起步，不管是SEO，还是SEM 都在着力于互联网这个新市场的开拓。我一直相信我们的未来是美好的，因为只要搜索引擎的存在，我们的价值将是无限的高。调查表明在欧美等发达国家，SEM已经是一个非常流行的企业对外营销手段。他们习惯在互联网络的分级市场中，建立品牌认同，加强品牌信任度，并进一步让消费者参与活动并购买自己的产品。

全球最大搜索引擎Google每天在其引擎的搜索量达到惊人的2亿人次，并且还在随着互联网的发展而状大。自从2004开始作为网络营销的一种新的形式进入中国，短短3年间随着中国互联网的快速发展，SEM也被越来越多的制造商，代理经销商所采用，并成为一种重要的对外营销手段。

对于SEO各大论坛上都在讨论，然后SEM却很少有人提起。这一点只能说明从事SEM的人员少之又少，因为往往很多SEO有了技术，基本上都自己做网站，也不愿意加入一些企业。因为有可能每月收录已经可能达上万了，这也造成了为什么SEM团队少之又少的原因之一。

Domain Overview反向链接分析这一部分提供了有关反向链接多方面的数据报告。首先介绍下反向链接的含义和作用。

什么是反向链接？它有什么作用？

  简单来说，如果网页A上的一个链接指向网页B, 那么这个链接就被称为网页B的反向链接。反向链接概念既包括站内链接和也包括站外链接，我们SEO工作中常说的添加反向链接指的是联系知名的站点添加指向自己网站的入站链接（Inbound Links），也就是站外链接。搜索引擎尤其是Google搜索引擎，非常青睐拥有大量高质量反向链接的网站，认为这样的网站针的结果页面针对搜索词更具有相关性。对于搜索引擎来说，网站的反向链接越多，说明这个网站的支持率越高，受欢迎度越高。搜索引擎更信赖这样的网站，觉着这样的网站更具权威性，自然网站的排名可以获得提升。

接下来我会对Domain Overview反向链接相关各区域内的数据一一解释。

Backlinks（反向链接）

Referring page title（推介网页标题）：（推介网页即上述例子中的网页A）反向链接所在网页）的页面标题。Referring Page URL（推介网页URL）：反向链接所在网页的URL。Anchor Text（锚文本）：添加反向链接的锚文本。Link URL：反向链接URL，即反向链接所指向网页的URL。这里根据Page Score列出了排在前五位的推介网页。以后会在Backlinks报告中解释Page Score的含义。点击“View full report”会跳转至Backlinks报告。

Referring Domains（推介域名）

推介域名：反向链接所在网站的域名。这里根据发送反向链接的数量的多少列出了前五位推介域名。Backlinks: 来自于各个推介域名的反向链接数量。IP/Country: 域名的主机IP地址和归属地。

Top Anchors（最常用锚文本）

这里列出了最常用的反向链接锚文本，嵌入每个锚文本的反向链接数量，以及反向链接的对应的推介域名的数量。Empty Anchor表示这些反向链接没有锚文本。

Follow VS Nofollow（Follow链接VS Nofollow链接）

这张环形图展示了follow和nofollow链接的数量和比例。nofollow是HTML标签的一个属性值，这个标签的意义是告诉搜索引擎机器爬虫不要追踪这个链接，也就是让机器爬虫不要传递这个页面的权重。上述例子中的网页A的backlink如果加了nofollow标签，搜索引擎也就不会把这个链接计算为网页B的反向链接。而follow链接则是指示爬虫追踪该链接。点击蓝色数字或图中颜色区块会跳转到Backlinks报告，可以查看哪些反向链接添加或没添加nofollow标签。

既然谈到了nofollow标签，这里就顺便介绍下nofollow标签的作用。nofollow标签的作用主要有三点：

如果你的网站有链接指向其它网站，给这些链接加上nofollow标签可以防止权重输出，避免自己网站的权重被稀释。

有的人为了获取反向链接会在博客评论中留下垃圾链接。现在很多博客会自动在评论中给这些链接加上nofollow标签，表示自己的网站不支持这些站点，避免 Google认为自己的网站与这些站点有瓜葛，否则自己的排名也会受到负面影响。

nofollow标签可以引导机器爬虫爬取有效的网页，避免由于爬取无意义的页面而影响爬取效率。

Backlink Type（反向链接类型）

这张环状图展示了Text Link，Image Link，Form Link， Frame Link四种链接的数量和所占的比例。

Text Link（文本链接）: 嵌入锚文本的超链接。

Image Link (图片链接)：嵌入图片的超链接以及图片URL地址（显示图片的URL）。

Form Link (表单链接) ：网页表单内的超链接，通过输入框或其它表单元素而发送，随着输入文本的修改而改变。

Frame Link (框架链接)：HTML框架中嵌入的超链接，浏览器窗口中的分隔符，用于分隔HTML区域。

点击蓝色数字或图中颜色区块会跳转到Backlinks报告，可以查看具体的反向链接。

通过查看竞争对手反向链接类型对自己如何建立反向链接也有所启发。

Indexed Pages（反向链接指向的网页）

这一区域展示了拥有反向链接最多的五个网页。列出了每个网页的页面标题，网页URL，推介域名以及反向链接数量。点击"View full report"会跳转至Indexed Pages报告。

下一篇章会讲解Domain Overview报告中的 展示广告数据分析 。

---