RSS
热门关键字:  江民 病毒库  kv2007  瑞星  江民  kv2008
当前位置 :| 主页>业界资讯>业界资讯>

百度蜘蛛爬虫被屏蔽 淘宝网回应

来源: 作者: 时间:2008-09-10 Tag:百度   淘宝   点击:
  有消息称,淘宝网已经开始屏蔽百度的蜘蛛爬虫,淘宝网在网站根目录下的robots.txt文件中设置相关命令,禁止百度蜘蛛获取网页信息。

  淘宝发言人向和讯IT表示,屏蔽确实存在,但并不是现在才开始,而是一直如此,屏蔽的是用户、成交等敏感信息。

  据了解,网络爬虫是一个自动提取网页的程序,它为搜索引擎从Internet网上下载网页,是搜索引擎的重要组成。一旦淘宝网屏蔽百度的爬虫,那用户将在百度上搜索不到任何关于淘宝的信息。
最新评论共有 0 位网友发表了评论
发表评论
评论内容:不能超过250字,需审核,请自觉遵守互联网相关政策法规。
用户名: 密码:
匿名?
注册