电子商务

您的位置:首页 > 新闻中心 > 电子商务 > 详细内容>

淘宝网回应其为何 屏蔽百度蜘蛛爬虫的原因

2010-09-23 15:38 作者: [大 中 小]

中国站长站讯:据消息人士称,淘宝网已经开始屏蔽百度的蜘蛛爬虫,淘宝网在网站根目录下的robots.txt文件中设置相关命令,禁止百度蜘蛛获取网页信息。

淘宝发言人向该人士表示,屏蔽确实存在,但并不是现在才开始,而是一直如此,屏蔽的是用户、成交等敏感信息。

据了解,网络爬虫是一个自动提取网页的程序,它为搜索引擎从Internet网上下载网页,是搜索引擎的重要组成。一旦淘宝网屏蔽百度的爬虫,那用户将在百度上搜索不到任何关于淘宝的信息。