news center新闻中心

首页

>

新闻中心

>

新闻详情

分享新闻到：

淘宝网回应其为何屏蔽百度蜘蛛爬虫的原因

互诺科技：2008-09-06 02:24 阅读数：标签：

中国站长站讯：据消息人士称，淘宝网已经开始屏蔽百度的蜘蛛爬虫，淘宝网在网站根目录下的robots.txt文件中设置相关命令，禁止百度蜘蛛获取网页信息。

淘宝发言人向该人士表示，屏蔽确实存在，但并不是现在才开始，而是一直如此，屏蔽的是用户、成交等敏感信息。

据了解，网络爬虫是一个自动提取网页的程序，它为搜索引擎从Internet网上下载网页，是搜索引擎的重要组成。一旦淘宝网屏蔽百度的爬虫，那用户将在百度上搜索不到任何关于淘宝的信息。