小爬虫工具成功案例深入解析

前面立子说提到如何建设一个用户喜欢的网站以及网站的运营、收益模式,本节立子说将为大家详细介绍小爬虫( www.sitemap-xml.org)的运营模式。

1、小爬虫的由来

小爬虫是一款在线生成网站地图的工具,只需要输入域名,系统就可以对网占进行爬行,最后生成完整的网站地图。用户只需下载网站地图,上传到网站根目录,然后在网站首页做链接,并且到百度站长平台提交链接即可。提交网站地图可以加速网站内容的收录,对SEO有非常积极的作用。

小爬虫的起源比较偶然。作者是程序员出身的SEOER,早些年一直在网上接单建站。那个时期CMS(Content Management System,内容管理系统)还不是特别成熟,很多用户要求建设的企业网站要有网站地图。于是作者就上网搜索可以生成网站地图的网站,结果当然不太理想,大部分网站需要手动填写逐条的URL地址才能生成网站地图,没有办法实现自动爬行抓取。作者就想能不能开发一个,经过尝试发现PHP等无法实现如此功能的抓取。后来偶然看到一个网站可以自动抓取,但是该网站已经几乎被遗弃,并且在出售,作者尝试联系站长,把小爬虫域名和原始程序买了过来,并对程序进行了重新架构,这样就诞生了现在的小爬虫。

2、我是如何优化小爬虫的

这些都不是重点,重点是购买小爬虫网站后如何对网站关键词进行布局和找到网站的盈利点。入手后才知道这个网站已经被原站长遗弃了很多年,每天的流量只有50 IP左右,关键词排名也不太理想。作者首先分析使用小爬虫工具的人群是站长,其次小爬虫网站的目标关键词是“网站地图”、“SITEMAP”、“网站地图在线生成”。

按照这些分析,我们制定了优化方案。首先这是一个工具网站,不可能每天在上面发文章,这样做既不现实也没有什么意义,所以要想获得排名必须通过外链。然后作者就联系一些网址导航类型的网站以及一些SEOER或者站长的博客和网站。

(l)交换友情链接或者购买链接。如图1-7所示,这些外链都是分批次做的,链接名称也不尽相同,如图1-8所示,一部分是“Sitemap在线生成”,一部分是“网站地图在线生成”,还有一部分是“小爬虫网站地图在线生成”,没有全部使用裸关键词。外链的详细建设方案将在立子说后续章节做深入的讲解。

小爬虫工具成功案例深入解析

图1-7 小爬虫网站做的外链

(2)通过数据分析得出网站的跳出率非常高,原因是小爬虫是收费的,没有对免费用户提供服务,这样大部分用户在进入网站后都会选择跳出,过高的跳出率会导致网站关键词排名持续下滑。经过考虑,我们决定对程序进行重新设计,免费用户可以抓取100条网站内容数据,想全站抓取就要交费,这样可以很大限度地降低跳出率。

小爬虫做的友情链接

图1-8 小爬虫做的友情链接

(3)这样经过一个多月的重新调整布局,网站的流量从50IP上升到600 IP左右,从图1-9中可以看出“网站地图”、“sitemap”、“网站地图制作”等关键词都位于百度搜索结果前三。通过这600IP左右的流量,每天至少转化两个升级Ⅷ用户。这笔收入虽然不高,但能维持其服务器的正常开销,对于这样一个筒单的工具类型的网站来说,能获得如此的关键词排名和流量,甚至已经开始盈利,实属不易。

图1-9 小爬虫的关键词排名

图1-9 小爬虫的关键词排名

通过这个案例我们可以完整地看到一个网站从需求到盈利点的形成过程,可以给我们建设网站和做SEO提供参考。限于篇幅,立子说这里不再对小爬虫做深入分析。

未经允许不得转载:艾博蕾尔 » 小爬虫工具成功案例深入解析

赞 (0)

评论 0

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址