大家有探讨稳定采集京东商品详情页面的数据包括App端和H5端及PC端，采集数据包括：获取商品列表主图、价格、标题，sku，商品评论日期，评论内容，评论图片，买家昵称，追评内容，商品属性，追评属性图片等页面上有的数据接口完整解决方案。这个引起了我技术挑战的兴趣。目前，自己做了压测，QPS高、出滑块概率极低，API整体稳定，可满足业务场景的性能需求。
解决方案（点击获取key和secret)：经讨论封装成item_get-获得商品详情接口和item_search-按关键字搜索商品接口，利用该接口可以拿到商品ID，商品标题，商品优惠券，商品到手价，商品价格，商品优惠价，商品sku属性，商品图片，商品视频，商品sku属性图片，商品属性描述，商品库存，商品销量，店铺优惠券信息，商品评论日期，评论内容，评论图片，买家昵称，追评内容，商品属性，追评属性图片等商品详情页面有的数据均可以拿到，可以结合其他接口关键词搜索接口，详情接口，销量接口，店铺所有商品接口，店铺订单，店铺上传接口，买家订单接口，商品评论接口，图片搜索接口，淘口令接口等接口，整个平台页面上可以看的到数据均可以拿到，接口适用于淘宝天猫，京东，拼多多，阿里巴巴，微店，抖音，亚马逊，速卖通，lazada,shopee等全球知名的30多个电商平台，接口应用于：商品分析，竞品分析，品牌监控，商品搬家，商品上传，商城建设，淘宝客，erp选品，店铺同步，CID店铺订单回传接口等众多业务场景，接下来将展示接口代码：
1.请求参数 （支持taobao(tmall),JD,1688，Pinduoduo,lazada,amazon,aliexpress等全球30多个知名电商平台数据，同样的方式拿数据）
请求参数：num_iid=10335871600 参数说明：num_iid:JD商品ID
2.请求代码示例,支持高并发请求（CURL、PHP 、PHPsdk 、Java 、C# 、Python…)
//using System.Net.Security;
//using System.Security.Cryptography.X509Certificates;
private const String method = "GET";
static void Main(string[] args)
{
String bodys = "";
// 请求示例 url 默认请求参数已经做URL编码
String url = "https://wx19970108018/jd/item_get/?key=<您自己的apiKey>&secret=<您自己的apiSecret>&num_iid=10335871600";
HttpWebRequest httpRequest = null;
HttpWebResponse httpResponse = null;
if (url.Contains("https://"))
{
ServicePointManager.ServerCertificateValidationCallback = new RemoteCertificateValidationCallback(CheckValidationResult);
httpRequest = (HttpWebRequest)WebRequest.CreateDefault(new Uri(url));
}
else
{
httpRequest = (HttpWebRequest)WebRequest.Create(url);
}
httpRequest.Method = method;
if (0 < bodys.Length)
{
byte[] data = Encoding.UTF8.GetBytes(bodys);
using (Stream stream = httpRequest.GetRequestStream())
{
stream.Write(data, 0, data.Length);
}
}
try
{
httpResponse = (HttpWebResponse)httpRequest.GetResponse();
}
catch (WebException ex)
{
httpResponse = (HttpWebResponse)ex.Response;
}
Console.WriteLine(httpResponse.StatusCode);
Console.WriteLine(httpResponse.Method);
Console.WriteLine(httpResponse.Headers);
Stream st = httpResponse.GetResponseStream();
StreamReader reader = new StreamReader(st, Encoding.GetEncoding("utf-8"));
Console.WriteLine(reader.ReadToEnd());
Console.WriteLine("\n");
}
public static bool CheckValidationResult(object sender, X509Certificate certificate, X509Chain chain, SslPolicyErrors errors)
{
return true;
}
3.响应示例因文章限制，暂不展示全部，欢迎代码交流。
{ "item": { "num_iid": "10335871600", "title": "安踏男鞋休闲运动鞋男士2021春季网面透气轻便板鞋慢跑步鞋子户外训练旅游 -6安踏白 42", "desc_short": "", "price": "159.00", "total_price": 0, "suggestive_price": 0, "orginal_price": "249.00", "nick": "安踏悠购专卖店", "num": 999, "min_num": 0, "detail_url": "item.jd.com/10335871600…", "pic_url": "//img10.360buyimg.com/n1/jfs/t1/161425/26/11624/223402/6048750bE7b82f057/24b57f419c846302.jpg", "brand": "", "brandId": "", "rootCatId": 12099, "cid": 9756, "crumbs": [], "created_time": "", "modified_time": "", "delist_time": "", "desc": "
<img src="img30.360buyimg.com/popWaterMar…"
