评论: 真搞笑，堂堂百度居然看不懂robots.txt

作者: 大圣

大圣 — Fri, 13 Jun 2008 11:24:32 +0000

充个性！牛B大了，就喜欢与天下人对着干！

大圣 — Fri, 13 Jun 2008 11:23:58 +0000

该抓的不抓不该抓的却去抓，很有“个性”嘛

大圣 — Fri, 13 Jun 2008 11:23:12 +0000

我还是首次看到！

大圣 — Fri, 13 Jun 2008 11:22:53 +0000

呵呵！可能是出现了机器故障！

大圣 — Fri, 13 Jun 2008 11:22:05 +0000

哦！那就要列列它的笑料了

幼峰 — Fri, 13 Jun 2008 09:59:10 +0000

百度向来都很白痴

cosbeta — Fri, 13 Jun 2008 09:40:55 +0000

谁都知道baidu是流氓一般的抓取，无视robots的存在，然后就号称自己最懂中文，以至于将别人不喜欢公开的东西都给抓出来了

小胖 — Fri, 13 Jun 2008 06:51:42 +0000

百度一般都无视robots.txt的，已经是传统了

LoveBlogEarn — Fri, 13 Jun 2008 06:35:32 +0000

不是很懂！或许百度也有发闷的时候！

Elton Disney — Fri, 13 Jun 2008 06:30:16 +0000

其实百度不止这么搞笑，反正它就是很搞笑～～～