Loading...

淘宝封百度

2008-09-06 11:06:45 发表于互联网事 本文链接: 淘宝封百度

据说淘宝开始“封”百度了,如果不相信,看这个页面就知道了.问题是,如果仅仅局限于robot规则,淘宝能封得住百度么?

百度不遵守robots是众所周知的秘密,对于百度想抓取的站点,robots毫无用处,对于可抓可不抓到站点,robots才能起作用。所以我想在robots后面,淘宝为了封百度,应该是还有一批人专门在后台负责处理百度蜘蛛的抓取吧。淘宝封百度应该不仅仅只有封锁信息、保护用户隐私的原因吧,也有可能是百度的蜘蛛太过分,疯狂的抓取,导致淘宝单单为了应付百度就投入了不少,前几天淘宝网不老是出现速度缓慢的问题嘛,当然这是个人猜测。对于百度蜘蛛的品德,大家看看下面的一段聊天记录都知道了:

我: 你的虚拟主机确实很快很快哦
21:14 XXX: 快得都出问题了。。。
21:15 我: ?
21:16 XXX: 速度太快,百度的北京爬虫一来apache就撑不住
我: 也是,baidu的爬虫很多么,  多少并发?  大约
XXX: 多。多网段的,安全模块都不起作用, 最少500+
我: 靠,无耻
XXX: 非常无耻。  恶心得不得了
我: google呢?
XXX: Google当然不可能
21:18 我: 技术不在同一个档次
21:19 XXX: 是啊。  如果限制速度能保证稳定  但是速度就慢了
我: 呵呵,打算这样做么?
21:20 XXX: 还在想办法解决这个问题  速度既要快

当然上面的记录不能说太多的问题,但是至少能说明百度蜘蛛疯狂是一个事实。在国内这样一个互联网乱世,谁守规则谁都没有好日子过,所以淘宝屏蔽百度,我们也不知道到底唱的是哪一出,很多朋友认为会给淘宝带来很多不利的因素,可能会有,但是别忘了,yahoo也是一个做搜索引擎的公司。而对于我自己来说,我需要网上购买东西的时候一般都是直接在淘宝搜索,而没有百度搜索的这个习惯。

百度,我一向对他没有好感,这样的搜索引擎,应该早点摆脱对他的依赖。淘宝封百度,此举非常明智。

放一个调查在下面,有兴趣的请投票哦:

标签:
发表于 2008-09-06 11:06:45 目录:互联网事 [RSS 2.0] 你可以发表评论, 或者从您的网站 trackback
feed url
上一篇: « 再谈chrome
已经有3位大师动手指导 拒绝低俗
评论分页: 1
(Required)
(Required, not published)
如果留言未显示无需重复留言,我将为你恢复!