<<<<<<< .mine =======
当前位置: 首页 > SEO > 关于百度蜘蛛IP的一些个人看法

关于百度蜘蛛IP的一些个人看法

时间:2011-11-21 08:58:48
在看网站iis日志时,最多的是看百度蜘蛛爬取了网站的哪些页面,返回的状态码是不是200,很少去分析百度蜘蛛的IP。偶然间看到网上一篇文章,以探讨的口气分享到:百度对于图片、文字等的抓取会派出不同IP段的蜘蛛,甚至,百度快照是否更新以及网站是否会被百度降权也可以从访问网站的蜘蛛IP中看出端倪。

看到这篇文之后好像给自己打开了一条思路,于是立刻查看了负责的两个网站的iis日志,其中一个网站有明显的降权迹象,收录递减,快照停止;另一个则是天天快照,搜索引擎表现向着良好的趋势发展。查看访问两个网站的百度蜘蛛IP,确实发现被降权的网站有一个IP段的蜘蛛是表现正常的网站iis日志中所没有或者很少出现的。而且抓取图片的蜘蛛跟抓取文字的也不属于一个IP段。

旋即问了小boss和大boss,给出的答案分别是一两个网站的iis日志说明不了问题需要对多个网站的日志进行研究和之前确实有过这样的说法但是很快被推翻了。

的确,两个网站的iis日志一点也没有说服力,至于被推翻的原因,个人在网上没有找到相关的说明资料,猜测是有站长发现对应的蜘蛛在自己那里并没有起到所说的作用。

这里,我也有一个大胆的假设。百度蜘蛛IP确实有第一段中所叙述的功能,但是在不同的地域IP段所带回的信息是不同的,具体来说就是:

1、百度将搜索引擎的用户按某种规则(极有可能是地域)分成几个几十个甚至几百个区域,在某个区域内百度蜘蛛IP段所带回的信息是相同的,不同地域同一IP段的蜘蛛所返回的信息是不同的;

2、百度定期或不定期的调整IP段的功能;

3、以上两者的综合,即在同一IP段百度蜘蛛在不同区域所代表不同意思的前提下定期或不定期的调整该IP段在该区域的功能。

上述几点纯属个人异想天开的一些看法,也请大家多多讨论给出自己的观点。

 

相关文章

《只要你过得比我好》之SEO版

如果稍微有点年纪,相信你看到标题,就可以很自然地哼出这首歌的曲调,不错,这就是90年代初钟镇涛的《只要你过得比我好》,时...

百度谷歌搜狗搜搜有道盘古人民一淘

百度谷歌搜狗搜搜有道盘古人民一淘,这么一句话用中文读起来,不通顺,但是在此时此刻,一个国内互联网从业人员可能都能读得懂。...

社会化媒体对于SEO链接建设的促进作用展望

做了两年多的SEO,一年多的社会化媒体营销,一直在寻找两者之间的结合点。一直相信社会化媒体对于SEO的提升作用以及SEO...

搜索引擎判断网站权重的猜测

搜索引擎的计算排名规则,是依靠一个叫“网络机器人(crawlers)”或叫“网络蜘蛛(Spider)”的软件,爬行到各个...

SEO处女作:SEO让我更了解自己

转眼加入文军信息三个月了,这三个月看似很很短,但对于初来乍到的一个毕业生就感觉很漫长,这段时间有过挣扎,有过彷徨,有过退...
沪ICP备10034044号-12
400-685-0732
400-685-0732 在线咨询