百度站长平台很早就推出了主动推送网页链接的功能,以前一直觉得没用,因为我尝试推送过没有被百度抓取的链接(或者看到没有收录的页面链接主动推送到百度),然后观察日志记录,发现百度蜘蛛并没有抓取。不过最近做实验发现效果原来真的挺好,下面是我做的实验记录:
21:38分左右发送的
21:43分推送
21:52:37抓取22:24分发布
23:02分推送
23:57:56抓取
8:57分发布
9:19分推送
09:25:52抓取10:02分之前半自动发布了三篇文章,耗时较长。
10:02分推送三篇
10:03分抓取
10:13分抓取
10:19分抓取
10:09分采集发送
10:37分推送
没有抓取
18:20推送5篇新文章
18:22:41抓取
18:23:01抓取
18:23:01抓取
18:29:33抓取
从上面的记录可以看出来,推送了以后,百度就会抓取,并且有时候抓取的速度非常快,你上一分钟推送了,下一分钟就被抓取了。当然也有抓的慢的,但绝大部分情况下,推送的新链接都会被抓取。
1、通过测试,以前的网页旧链接即使你推送给百度,也不会被抓取,这个测试并不严格,我测试的时候用的是少数几个页面,如果一次性批量提交很多页面,是不是有一定概率能增加这些提交页面的抓取呢?有待测试!
2、抓取速度并没有我想象的那么慢,要过个几天甚至一两周时间,实际上一般在一小时内就会抓取。前提是你的页面链接必须是新链接。这其实给出了一个未被抓取的页面增加收录的提示!