一个月的蜘蛛统计及收录思路总结

据悉，近期爱闷声发大财的大哥悄咪咪出售百度引蜘蛛软件，3k一个授权码，限制一台机器使用。

某位钱多没地方花的好友，暗自买了一个，测试了几天最新程序，发现来蜘蛛不收录，果然这几天卖程序的大佬都销声匿迹了。

恰巧前段时间，有个人才通过exe反汇编软件修改了几个曾经失效的软件，修改了部分网址及参数，同样也实现了引权重蜘蛛的效果。

（上图只是随意演示，并非真实效果，图片与本文所述软件无关）

实际上我也使用软件测试了，是能够来蜘蛛，但完全不能实现收录，想来应该是一样的强引蜘蛛方式吧？

个人测试报表

反正有空闲的服务器，就搭建了三个小说站和一个蜘蛛池测试，看看蜘蛛的频率如何。一个月的测试报表如下：

蜘蛛统计A

蜘蛛统计B

蜘蛛统计C

蜘蛛池

总结

如上图所示，在过去的一个月里，我测试了过去两年中出现过的大量的推送及引蜘蛛程序，经过多方面的测试及交流，总结出如下几个经验：

1.目前百度站长资源平台的sitemap提交和token推送功能，能实现收录；

2.目前绝大部分强引蜘蛛软件失效，有三款有效，但其中两款完全不收录，只能浪费服务器和代理IP资源；

3.强引的蜘蛛目前量只有几万到十几万不等，且只有非常少量的收录，且快照约在两周内放出；

4.一个域名如果原先没有蜘蛛，一次性大量来蜘蛛，会导致域名“不孕不育”，短期内不来任何蜘蛛抓取，不产生任何收录；

5.如果盯着一个域名引蜘蛛的话，会导致域名产生“抗体”，在短期内（比如一周内）会产生周收甚至日收，但引了两周左右就不收录了。

申明

上文所有的闲聊以及经验的总结，仅为个人主观猜测及总结；

上文中所示的三个小说站点以及一个蜘蛛池均为正规站，且在发稿日全部做删站处理；

看到有无情哈拉少疯狂群发：“不限行业不限内容，秒收录，且可以指定url收录”，令人向往，但持怀疑态度。

我们应该遵守法律，回归内容原创，给互联网更多有质量的内容，才能做出好的网站！