大家有探讨稳定采集京东商品详情页面的数据包括App端和H5端及PC端,采集数据包括:获取商品列表主图、价格、标题,sku,商品评论日期,评论内容,评论图片,买家昵称,追评内容,商品属性,追评属性图片等页面上有的数据接口完整解决方案。这个引起了我技术挑战的兴趣。目前,自己做了压测,QPS高、出滑块概率极低,API整体稳定,可满足业务场景的性能需求。
解决方案(点击获取key和secret):经讨论封装成item_get-获得商品详情接口和item_search-按关键字搜索商品接口,利用该接口可以拿到商品ID,商品标题,商品优惠券,商品到手价,商品价格,商品优惠价,商品sku属性,商品图片,商品视频,商品sku属性图片,商品属性描述,商品库存,商品销量,店铺优惠券信息,商品评论日期,评论内容,评论图片,买家昵称,追评内容,商品属性,追评属性图片等商品详情页面有的数据均可以拿到,可以结合其他接口关键词搜索接口,详情接口,销量接口,店铺所有商品接口,店铺订单,店铺上传接口,买家订单接口,商品评论接口,图片搜索接口,淘口令接口等接口,整个平台页面上可以看的到数据均可以拿到,接口适用于淘宝天猫,京东,拼多多,阿里巴巴,微店,抖音,亚马逊,速卖通,lazada,shopee等全球知名的30多个电商平台,接口应用于:商品分析,竞品分析,品牌监控,商品搬家,商品上传,商城建设,淘宝客,erp选品,店铺同步,CID店铺订单回传接口等众多业务场景,接下来将展示接口代码:
1.请求参数 (支持taobao(tmall),JD,1688,Pinduoduo,lazada,amazon,aliexpress等全球30多个知名电商平台数据,同样的方式拿数据)
请求参数:num_iid=10335871600参数说明:num_iid:JD商品ID
2.请求代码示例,支持高并发请求(CURL、PHP 、PHPsdk 、Java 、C# 、Python…)
# coding:utf-8
"""
Compatible for python2.x and python3.x
requirement: pip install requests
"""
from __future__ import print_function
import requests
# 请求示例 url 默认请求参数已经做URL编码
url = "https://wx19970108018/jd/item_get/?key=<您自己的apiKey>&secret=<您自己的apiSecret>&num_iid=10335871600"
headers = {
"Accept-Encoding": "gzip",
"Connection": "close"
}
if __name__ == "__main__":
r = requests.get(url, headers=headers)
json_obj = r.json()
print(json_obj)
3.响应示例因文字字符限制,暂不展示全部,欢迎代码交流。
{
"item": {
"num_iid": "10335871600",
"title": "安踏男鞋休闲运动鞋男士2021春季网面透气轻便板鞋慢跑步鞋子户外训练旅游 -6安踏白 42",
"desc_short": "",
"price": "159.00",
"total_price": 0,
"suggestive_price": 0,
"orginal_price": "249.00",
"nick": "安踏悠购专卖店",
"num": 999,
"min_num": 0,
"detail_url": "https://item.jd.com/10335871600.html",
"pic_url": "//img10.360buyimg.com/n1/jfs/t1/161425/26/11624/223402/6048750bE7b82f057/24b57f419c846302.jpg",
"brand": "",
"brandId": "",
"rootCatId": 12099,
"cid": 9756,
"crumbs": [],
"created_time": "",
"modified_time": "",
"delist_time": "",
"desc": "<p><br></p><p><img src=\"https://img10.360buyimg.com/imgzone/jfs/t1/38380/20/8577/216030/5cfdcf2eE3d3c15fc/9072ee4986b3f8d4.jpg\"><img src=\"http://img30.360buyimg.com/popWaterMark/jfs/t11302/317/3187030400/282664/5886b268/5ce3c383N6572b1da.jpg\"><br></p><p><img src=\"http://img30.360buyimg.com/popWaterMark/jfs/t29380/248/1583857170/211757/8803264c/5ce3c383Nf658d385.jpg\"><img src=\"http://img30.360buyimg.com/popWaterMark/jfs/t1/109234/40/8433/163092/5e6764a2E4e1a8595/47322c3588d6d0c8.jpg\"><img src=\"http://img30.360buyimg.com/popWaterMark/jfs/t1/89006/11/14706/167699/5e6764a2E68bdab3a/be235af214561ca7.jpg\"><img src=\"http://img30.360buyimg.com/popWaterMark/jfs/t1/109389/11/8312/121412/5e6764a2E0699edcb/74e48d00298808af.jpg\"><img src=\"http://img30.360buyimg.com/popWaterMark/jfs/t1/93399/24/14627/132014/5e6764a3E0f078e8e/8598eb9176d64a6c.jpg\"><img src=\"http://img30.360buyimg.com/popWaterMark/jfs/t1/107443/10/8345/114390/5e6764a3Ea1726cee/45cfa1a0f7a8df0c.jpg\"></p><p><img src=\"http://img30.360buyimg.com/popWaterMark/jfs/t1/96343/40/10991/241473/5e257548Ed6f96ea3/b52ab120eb9f7db0.jpg\" ><img src=\"http://img30.360buyimg.com/popWaterMark/jfs/t1/101185/7/11047/209310/5e257548E8788bdf6/c20d5eb0405dde28.jpg\" ><img src=\"http://img30.360buyimg.com/popWaterMark/jfs/t1/107815/5/4768/276947/5e257548Ee42f500c/0ba8cd264bd603a3.jpg\"