淘宝网回应其为何 屏蔽百度蜘蛛爬虫的原因

源代码网整理以下中国站长站讯：据消息人士称，淘宝网已经开始屏蔽百度的蜘蛛爬虫，淘宝网在网站根目录下的robots.txt文件中设置相关命令，禁止百度蜘蛛获取网页信息。

源代码网整理以下淘宝发言人向该人士表示，屏蔽确实存在，但并不是现在才开始，而是一直如此，屏蔽的是用户、成交等敏感信息。

源代码网整理以下据了解，网络爬虫是一个自动提取网页的程序，它为搜索引擎从Internet网上下载网页，是搜索引擎的重要组成。一旦淘宝网屏蔽百度的爬虫，那用户将在百度上搜索不到任何关于淘宝的信息。