发布者认证信息(营业执照和身份证)未完善,请登录后完善信息登录
终于懂了一淘公开价格战数据抓取过程_投资理财_资讯_客集网
终于懂了一淘公开价格战数据抓取过程

终于懂了一淘公开价格战数据抓取过程

作者:kjnews8   2023-01-04 17:56:10  点击:14

详情

新浪科技讯 9月6日下午消息,针对有媒体报道称一淘在电商价格战中公布的数据失实一事,一淘今天对外公布了一淘数据抓取的过程。

据一淘网工程师黑侠介绍,一淘搜索引擎的工作原理与通用搜索类似,都需要经过抓取、抽取、入数据库、建索引、以及页面展示等流程。对于购物搜索来说,搜索引擎蜘蛛就等于是一淘派出的“价格情报员”。一淘通过搜索蜘蛛自动浏览购物网站的商品页面,收集所有购物网站的商品信息,抽取出商品标题、商品价格、商品图片等重要信息存入数据库,并建成索倒排引,在用户搜索以后,来自于不同商家的,符合用户搜索关键词的商品信息就会一一展示出来了。

黑侠称,在价格战期间,“价格擂台”页面大家电及3C数码等品类商品的价格数据更新频率高达到了15分钟一次。一淘蜘蛛对于参与价格战的大家电、3C数码产品价格的抓取频率高达5分钟一次。

一淘方面称,一淘从去年开始就保持着对重要商品、热门商品价格变化情况的记录。即使是两年以前的价格信息,一淘都可以追查出来。

相关分类
请在电脑上注册登陆 网址: https://cn.kaijikj.com/