网站上线半个月,首页还没收录,天天site看,干干净净一条结果都没有——这种滋味,做过新站的人都懂。
我去年6月份上线了一个资讯站,前前后后改了三四版,内容也有两百多篇了,结果半个多月,百度连首页都不理我。蜘蛛日志一拉,好家伙,就上线那天来爬过一回robots,之后影都没了。
那段时间整个人都是崩溃的。
后来实在是憋不住了,找了几个老站长请教,自己也摸索出一套“野路子”引蜘蛛的办法,就是标题里说的蜘蛛池方案。别一听到“蜘蛛池”就觉得是灰产,其实原理特简单,只是被一些人玩坏了。
我先把我怎么操作的写出来,再说这里面的弯弯绕绕,你一看就懂。
一、新站为什么不收录?
先把病根说清楚。新站不收录,一般就这几个原因:
域名没备案,或者有黑历史。查一下域名之前有没有被墙、被K过,这一点太重要了。
网站内容全是采集的,或者同质化太严重,百度根本提不起兴趣。
没有外链,没有入口,蜘蛛根本不知道你这站的存在。
服务器老是打不开,或者国内访问速度拉胯,蜘蛛来一次慢得要死,下次就不想来了。
我那资讯站,备案没问题,服务器也是国内的,问题出在第3点——没有蜘蛛入口。整个站就像一个没门牌号的房子,百度找不到门在哪儿。
那怎么办?人工给百度蜘蛛铺一条路,这就是所谓的“蜘蛛池”。
二、什么是蜘蛛池?说人话版
别信那些包装得神乎其神的广告,什么“一万条蜘蛛同时爬你的站”,那不叫蜘蛛池,那叫流量攻击。
蜘蛛池,本质上就是用一批本身就有百度蜘蛛频繁来访的站点,把你要推的新站链接挂上去。蜘蛛爬那些“池子站”的时候,顺着链接就爬到你的新站了。
就像你新开了一家店,位置很偏没人知道,你在步行街人流量最大的地方竖了几块指路牌,人家逛街的时候看到了,顺着就找过来了。池子站就是那个指路牌。
知道原理,就知道该怎么干了。
三、实操:低成本引蜘蛛方案
我下面说的,全是自己实打实做过的,没有任何玄学成分。
第一步:找“池子”,也就是高蜘蛛活跃度的站点
新手最容易犯的错,就是去买那种几十块钱一千条的所谓蜘蛛池链接。那种链接,大部分发在垃圾站群上,蜘蛛压根不去,去了也是低质量抓取,搞不好还连累你被判定为作弊。
我自己用的,是下面这几种“天然池子”:
1. 百家号、知乎、搜狐号这些高权重自媒体
尤其是百家号。你发一篇正常文章,别硬广,文章里非常自然地提一句你的网站,带个链接。百家号自己本身蜘蛛来得极勤,基本上几分钟就来一趟,你的链接放在里面,蜘蛛顺着就摸了进去。
我试过最狠的一次,中午12点在百家号发了一篇文章带了我新站的某个内页链接,下午两点多,日志里就看到百度蜘蛛爬了那个内页,三天后内页收录。
2. 自己养一批能收录的二级博客
这个适合有点精力的朋友。去用一些可以自定义域名的免费博客平台,或者直接用老域名开二级目录,做几个“内容小站”。不用多好看,就每天更新一两篇经过伪原创处理的文章,保证它们自己能收录。
收录稳定之后,在这些站点里挂上你新站的链接——首页的、内页的都行。重点在于,这些池子站得保证自己每天有蜘蛛来。怎么保证?持续更新,持续提交。
3. 老域名建站引蜘蛛
这招稍微有点门槛,但效果真的猛。找一个有建站历史、有收录的老域名,哪怕是之前做过企业站的,只要没被K过就行。用这个老域名建一个跟你新站主题相关的“资讯子站”,扒点行业新闻,改写一下发上去。
老域名天生的优势就是蜘蛛信任度高,爬行频率快。你在这个子站上加新站的链接,相当于用“蜘蛛老客户”带了“蜘蛛新客户”,传递信任。
我用过两个一百块淘来的老域名,一个做了英文站,一个做了中文资讯聚合,都起到了很好的引蜘蛛效果。
第二步:让蜘蛛“看见”链接,并且愿意爬进去
链接挂上去了还不行,你得主动告诉蜘蛛:“这有门儿,快来”。
1. 主动推送
百度站长平台的API推送、手动提交,不要懒,新站每天坚持提交新产生的URL。你把池子站里挂了新站链接的那些页面,也手动提交一次。等于告诉蜘蛛:我这页面更新了,你来看一下,顺便把里面的链接也爬一爬。
2. 蜘蛛模拟抓取
这个算是小技巧。用一些站长工具模拟百度蜘蛛抓取你挂了新站链接的那个页面。虽然模拟抓取不代表百度官方蜘蛛立马就来,但有时候确实能触发一波蜘蛛的关注,尤其是一些有蜘蛛聚集效应的平台页面。
3. 站内链轮推一把
在你的池子站上,除了挂新站链接,还可以做内部链轮,把这些挂了外链的页面用内链互相串起来。蜘蛛只要来了一个页面,就会顺着把其他链接页面一起爬了,爬行深度一上去,新站链接被抓取的概率成倍增加。
四、我那个资讯站最后怎么收录的
说回我那个资讯站。当时首页不收录,我是这样操作的:
从手里一个每天稳定有蜘蛛的老域名博客里,发了一篇《近期值得关注的几个行业资讯源》,文章里列出了几个网站,我的新站排在第二个,故意没用锚文本,直接放的纯网址,显得非常自然。
那篇博客当天被我手动推送给百度,并且用工具模拟抓取了两次。
同一天,我找了两个朋友的收录正常的网站,让他们在文章里顺带提了一嘴我这个站的域名,文字链接形式。
第二天早上起来查日志,百度蜘蛛凌晨三点多来爬了首页,上午十点一看,首页出来了。
后来复盘,其实最核心的就是老域名博客那一条路。为什么?因为那个博客蜘蛛来得实在,信任度高,它推的链接,百度愿意跟着爬。
五、一定要躲开的坑
1. 别碰垃圾蜘蛛池
市面上那种批量发包、挂一堆隐藏链接的蜘蛛池,千万别碰。那种池子来的蜘蛛,很多是低质的,甚至被百度标注过的“问题蜘蛛”。被这种蜘蛛密集爬过,不但不收录,还可能让新站进入漫长的考察期,严重的被判定为作弊。
2. 链接别堆得太刻意
一个页面挂十几个新站链接,全是用“点击查看”这种锚文本,太假了。宁可一个月挂两三条,做得像文中引用资料一样,带点上下文背景。
3. 收录不代表排名
这篇文章讲的是“收录问题”。但你要清醒,收录了不代表有排名。蜘蛛池只是帮你把蜘蛛请进门,后续的内容质量、用户体验,才是把蜘蛛留住、获得好排名的根本。别搞反了。
六、写在最后
新站不收录,特别是首页都不给,多半是因为百度根本不认识你,或者说,对你的站没有信任。
蜘蛛池相当于帮你找几个百度信得过的“朋友”,给你做个引荐。引荐到位了,门就开了。但门打开之后,能不能留住客人,看的是你自己的本事。
如果你是纯新手,建议先用百家号加自己养一个小博客做池子试试看,零成本,安全,见效也不慢。别一上来就去研究那些复杂的蜘蛛池程序,很容易走歪。
这条路我当初走了将近三个月才彻底跑顺,现在回想起来,最难的不是技术,是别在焦虑里乱投医。沉住气,把池子养好,蜘蛛迟早会来。