一淘网蜘蛛[编辑]
一淘网蜘蛛(EtaoSpider)为一淘网抓取工具
一淘网是阿里巴巴集团旗下的购物搜索引擎,它的工作原理与通用搜索类似,都需要经过抓取、抽取、入数据库、建索引、以及页面展示等流程。对于购物搜索来说,搜索引擎蜘蛛(即一淘网蜘蛛)就等于是一淘派出的“价格情报员”,一淘通过搜索蜘蛛自动浏览购物网站的商品页面,收集所有购物网站的商品信息,抽取出商品标题、商品价格、商品图片等重要信息存入数据库,并建成索倒排引,在用户搜索以后,来自于不同商家的,符合用户搜索关键词的商品信息就会一一展示出来了。
一淘网抓取系统的功能包括:网页抓取、抓取调度、域名解析、死链检测、JavaScript执行等。一淘的资讯、话题、问答combo中的大部分数据都是通过抓取系统从互联网获得的。因此,它是一淘一个重要的“原料厂”。
一淘蜘蛛的应用:一淘蜘蛛在8.15价格战期间发挥了巨大的作用,一淘蜘蛛对于参与价格战的大家电、3C数码产品价格的抓取频率高达5分钟一次,再经过抽取、索引、页面展现等过程,“擂台”页面商品的价格刷新频率在15分钟至30分钟左右,全程真实、透明的再现了价格战“战况”。有了一淘蜘蛛,对于那些价格变化频繁的商品,一淘也能够在第一时间将商品价格变化趋势通过价格“曲线图”等方式展现给消费者
网络营销词典内容均由网友提供,仅供参考。如发现词条内容有问题,请发邮件至info # wm23.com。