苏宁易购网站robots截图
10月27日上午消息,继昨日京东商城修改页面爬虫规则屏蔽阿里巴巴集团旗下比较购物搜索一淘网后,今日苏宁电器旗下网上商城苏宁易购加入战团,对页面爬虫规则进行修改,屏蔽一淘网搜索。 新浪科技在苏宁易购的robots文件中看到,苏宁已经把一淘网的抓取引擎列入列入禁止抓取名单。同时在robots文件下的一段注释文字称,一淘打着“倡导新商业文明、诚信”的口号,干着绑架消费者权利的商业行为。 苏宁易购总经理李斌在与新浪科技连线时表示,屏蔽一淘网确实是苏宁官方作出的行为,但是注释文字是个别员工所为,与官方无关,现在已经在内部调查为什么会出现这段文字。 在解释屏蔽一淘网抓取的原因时,李斌表示,一淘的搜索的结果将价格作为最关键的排序因素很不公平。“水货与行货、有售后服务与无售后服务价格肯定不同。” 昨日京东商城与一淘网暗战升级,京东商城通过技术手段在www.360buy.com/robots.txt页面中加入“User-agent: EtaoSpider Disallow: /”代码,屏蔽来自一淘网的内容抓取。(爱文) |