如何利用 Python 爬虫按图搜索 1688 商品(拍立淘):实战指南

60 阅读3分钟

在电商领域,按图搜索商品(类似“拍立淘”功能)是一种非常实用的功能,尤其适合用户通过图片快速查找相似商品。1688 开放平台提供了按图搜索商品的 API 接口,允许开发者通过图片获取相关的商品信息。本文将详细介绍如何使用 Python 爬虫技术调用 1688 的按图搜索 API 接口,并解析返回的数据

一、准备工作

(一)注册 1688 开放平台账号

访问 1688 开放平台,注册成为开发者,并创建应用以获取 AppKeyAppSecret。这两个凭证是调用 API 所必需的。

(二)安装必要的 Python 库

安装以下库,用于发送 HTTP 请求和解析 JSON 数据:

pip install requests

二、按图搜索商品的步骤

(一)生成签名

1688 API 接口需要对请求参数进行签名验证。以下是一个生成签名的 Python 方法示例:

import hashlib
import time

def generate_sign(params, app_secret):
    """生成签名"""
    sorted_params = sorted(params.items())
    sign_str = ''.join(f"{k}{v}" for k, v in sorted_params) + app_secret
    return hashlib.md5(sign_str.encode()).hexdigest().upper()

(二)上传图片并获取图片标识

如果使用本地图片,需要先将图片上传到 1688 的图片服务器,并获取图片的标识:

import requests

def upload_img_to_1688(app_key, app_secret, image_path):
    url = "https://api.1688.com/router/rest"
    params = {
        'app_key': app_key,
        'method': '1688.upload.img',
        'format': 'json',
        'v': '2.0',
        'timestamp': int(time.time()),
        'sign_method': 'md5'
    }
    files = {'file': open(image_path, 'rb')}
    params['sign'] = generate_sign(params, app_secret)
    response = requests.post(url, files=files, params=params)
    if response.status_code == 200:
        response_data = response.json()
        if 'pic_url' in response_data:
            pic_url = response_data['pic_url']
            print("上传成功, 图片URL为:", pic_url)
            return pic_url
        else:
            print("上传成功, 但未找到图片URL")
    else:
        print("请求失败, 状态码:", response.status_code)
    return None

(三)调用按图搜索接口

上传图片并获取图片标识后,可以使用 1688 的 API 接口进行按图搜索:

def search_items_by_img(app_key, app_secret, img_url, cat=None, page=1):
    url = "https://api.1688.com/router/rest"
    params = {
        'app_key': app_key,
        'method': '1688.item_search_img',
        'format': 'json',
        'v': '2.0',
        'timestamp': int(time.time()),
        'sign_method': 'md5',
        'imgid': img_url,
        'cat': cat if cat else '',
        'page': page
    }
    params['sign'] = generate_sign(params, app_secret)
    response = requests.get(url, params=params)
    if response.status_code == 200:
        response_data = response.json()
        for item in response_data.get('items', {}).get('item', []):
            print("商品标题:", item['title'])
            print("商品图片URL:", item['pic_url'])
            print("价格:", item['price'])
            print("销量:", item['sales'])
            print("商品链接:", item['detail_url'])
            print("-" * 40)
    else:
        print("请求失败, 状态码:", response.status_code)

(四)解析响应数据

API 返回的 JSON 数据通常包含商品的标题、价格、链接等信息:

{
    "items": [
        {
            "title": "商品标题",
            "price": "100.00",
            "detail_url": "商品链接"
        }
    ]
}

三、注意事项与优化建议

(一)遵守法律法规

在进行爬虫操作时,必须严格遵守相关法律法规,尊重 1688 开放平台的使用协议。

(二)合理设置请求频率

避免过高的请求频率导致对方服务器压力过大,可能触发反爬机制。

(三)数据安全

保护好 API 凭证,避免泄露。

(四)错误处理

在实际开发中,需要对 API 返回的错误码进行处理,例如:

  • 401 Unauthorized:检查 API 凭证是否正确。
  • 429 Too Many Requests:降低请求频率。

四、总结

通过上述步骤和代码示例,你可以高效地利用 Python 爬虫技术按图搜索 1688 商品,并获取其详细信息。无论是用于市场调研、竞品分析还是用户体验优化,这些数据都将为你提供强大的支持。希望本文的示例和策略能帮助你在爬虫开发中更好地应对各种挑战,确保爬虫程序的高效、稳定运行。