电商数据体量庞大,但其中的价值有比较巨大,比如品牌在做控价时,需要电商数据进行比价、筛选,然后再针对性的做低价治理,或者品牌需要分析线上数据的差异,输出各种对品牌有帮助的电商数据分析报告,那采集数据就非常关键,所以高效采集电商数据就非常重要。
用系统采集提高效率
电商数据的采集可以依靠人工,也可以依靠系统,当数据量少的时候,人工直接爬取是没有问题的,但当数据体量增多,要分析的数据维度变复杂时,则需要借助系统完成采集工作,专业的数据采集系统不仅可以覆盖多个平台,还能设置不同的采集频次,大大提升采集效率。
高效采集的同时还应保证准确率
数据采集是基础,所以更要保证采集到的数据准确率,否则会影响后续的所有相关工作,比如控价,比如数据分析,判断数据是否采集准确的方式也很简单,只要看数据是否与页面所见一致即可,比如价格、促销信息、评价内容等。电商数据的获取方式很多,较为高效的肯定是系统采集,只有在采集环节用最少的时间,才能为品牌节省更多时间,使品牌可以做更多与渠道管控、品牌营销相关的工作。
调用API接口来高效获取电商平台的商品数据,是比价系统不可或缺的一部分。选择一个高效稳定有保障的API,可以保障系统运行稳定。下面是我之前测试API的一个过程示例,仅供参考。
公共参数
名称 | 类型 | 必须 | 描述 |
---|---|---|---|
key | String | 是 | 调用key(必须以GET方式拼接在URL中) |
secret | String | 是 | 调用密钥 |
api_name | String | 是 | API接口名称(包括在请求地址中)[item_search,item_get,item_search_shop等] |
cache | String | 否 | [yes,no]默认yes,将调用缓存的数据,速度比较快 |
result_type | String | 否 | [json,jsonu,xml,serialize,var_export]返回数据格式,默认为json,jsonu输出的内容中文可以直接阅读 |
lang | String | 否 | [cn,en,ru]翻译语言,默认cn简体中文 |
version | String | 否 | API版本 |
请求参数
请求参数:num_iid=652874751412&is_promotion=1
参数说明:num_iid:淘宝商品ID
is_promotion:是否获取取促销价
测试返回数据(部分)
?