淘宝 API 数据接口开发实战：构建商品信息实时监控系统

电商API大数据接口开发Cris
117 阅读6分钟

​

在电商行业竞争日益激烈的当下，及时掌握商品信息的动态变化，对企业制定精准营销策略、优化供应链管理以及提升用户体验至关重要。通过淘宝 API 数据接口，我们能够获取丰富且实时的商品数据，进而构建一套高效的商品信息实时监控系统。本文将详细介绍该系统的开发实战过程，并提供完整的 Python 代码示例，助你快速上手。​

一、前期准备工作​

1.1 淘宝测试账号注册与应用创建​

首先，点击 “免费注册”，按照页面提示完成开发者账号注册，注册过程中需完成身份验证。注册成功后，登录开发者控制台，点击 “创建应用”，填写应用名称、描述、图标等信息，并选择合适的应用类型，如网站应用或移动应用。创建完成后，进入应用管理页面，后续将在此申请 API 权限。​

1.2 API 权限申请​

在应用管理页面的 “权限申请” 模块中，搜索与商品信息获取相关的 API 接口，如taobao.items.onsale.get（用于获取在线商品列表）、taobao.item.get（用于获取单个商品详情）、taobao.item.sku.get（用于获取商品 SKU 信息）等。提交申请后，等待平台审核，一般审核周期为 1 - 3 个工作日。审核通过后，即可获得调用这些接口的权限。​

1.3 开发环境搭建​

在本地开发环境中，安装必要的 Python 库。使用pip命令安装requests库用于发送 HTTP 请求获取数据，安装mysql - connector - python库（若选择 MySQL 存储数据）用于连接和操作数据库，安装schedule库用于设置定时任务实现实时监控。安装命令如下：

pip install requests mysql-connector-python schedule

 

二、API 接口开发核心代码​

2.1 生成请求签名​

淘宝 API 要求所有请求都必须携带签名以确保请求的合法性和安全性。以下是使用 Python 生成签名的代码实现：

import hashlib
import urllib.parse


def generate_sign(params, app_secret):
    """
    生成请求签名
    :param params: 请求参数
    :param app_secret: 应用密钥
    :return: 签名
    """
    sorted_params = sorted(params.items(), key=lambda x: x[0])
    query_string = urllib.parse.urlencode(sorted_params)
    string_to_sign = app_secret + query_string + app_secret
    sign = hashlib.md5(string_to_sign.encode()).hexdigest().upper()
    return sign

 

2.2 发送请求获取商品数据​

利用requests库发送 HTTP 请求，获取淘宝商品数据。以获取在线商品列表为例，代码如下：

import requests
import time


def fetch_taobao_data(app_key, access_token, keyword, page_no=1, page_size=20):
    """
    获取淘宝商品数据
    :param app_key: 应用Key
    :param access_token: 访问令牌
    :param keyword: 搜索关键词
    :param page_no: 页码
    :param page_size: 每页数量
    :return: 商品数据
    """
    base_url = "https://eco.taobao.com/router/rest"
    params = {
        "app_key": app_key,
        "method": "taobao.items.onsale.get",
        "access_token": access_token,
        "timestamp": time.strftime('%Y-%m-%d %H:%M:%S', time.localtime()),
        "format": "json",
        "q": keyword,
        "page_no": page_no,
        "page_size": page_size
    }
    app_secret = "你的应用密钥"
    params["sign"] = generate_sign(params, app_secret)
    try:
        response = requests.get(base_url, params=params)
        if response.status_code == 200:
            data = response.json()
            return data
        else:
            print(f"请求失败，状态码：{response.status_code}")
            return None
    except Exception as e:
        print(f"请求出错：{e}")
        return None

 

2.3 数据处理与存储​

获取到商品数据后，需要对数据进行处理并存储到数据库中。这里以 MySQL 数据库为例，创建一个名为taobao_products的表用于存储商品信息，表结构包含id（自增主键）、title（商品标题）、price（商品价格）、sales（销量）、update_time（数据更新时间）等字段。数据存储代码如下：

import mysql.connector
from datetime import datetime


def save_to_mysql(data):
    """
    将商品数据保存到MySQL数据库
    :param data: 商品数据
    """
    mydb = mysql.connector.connect(
        host="localhost",
        user="你的用户名",
        password="你的密码",
        database="你的数据库名"
    )
    mycursor = mydb.cursor()
    for item in data.get('items', []):
        title = item.get('title')
        price = item.get('price')
        sales = item.get('sold_total')
        update_time = datetime.now()
        sql = "INSERT INTO taobao_products (title, price, sales, update_time) VALUES (%s, %s, %s, %s)"
        val = (title, price, sales, update_time)
        mycursor.execute(sql, val)
    mydb.commit()
    mycursor.close()
    mydb.close()

 

三、构建商品信息实时监控系统​

3.1 控制请求频率​

为避免因频繁请求触发淘宝 API 的频率限制，在每次请求后添加适当的延时。可在fetch_taobao_data函数中加入如下代码：

import time

def fetch_taobao_data(app_key, access_token, keyword, page_no=1, page_size=20):
    # 原有代码...
    time.sleep(1)  # 每次请求后暂停1秒
    try:
        # 发送请求代码...

 

3.2 设置定时任务​

使用schedule库设置定时任务，定期执行商品数据采集和存储操作，实现商品信息的实时监控。示例代码如下：

import schedule
import time


def run_monitoring():
    app_key = "你的应用Key"
    access_token = "你的访问令牌"
    keyword = "你关注的商品关键词"
    data = fetch_taobao_data(app_key, access_token, keyword)
    if data:
        save_to_mysql(data)


# 每10分钟执行一次数据采集和存储任务
schedule.every(10).minutes.do(run_monitoring)

while True:
    schedule.run_pending()
    time.sleep(1)

 

3.3 监控数据异常与报警​

为了及时发现商品信息的异常变化，如价格突然大幅波动、销量异常增长或下降等，可以在数据处理过程中添加异常检测逻辑。例如，当商品价格变动超过一定比例时，发送邮件或短信报警。以下是一个简单的价格异常检测示例代码（需借助第三方邮件库yagmail实现邮件报警，安装命令：pip install yagmail）：

import yagmail


def check_price_anomaly(old_price, new_price):
    """
    检查价格是否异常波动
    :param old_price: 旧价格
    :param new_price: 新价格
    :return: 是否异常
    """
    if abs((new_price - old_price) / old_price) > 0.2:  # 价格波动超过20%视为异常
        return True
    return False


def send_alert_email(subject, content):
    """
    发送报警邮件
    :param subject: 邮件主题
    :param content: 邮件内容
    """
    yag = yagmail.SMTP(user="你的邮箱账号", password="你的邮箱密码", host="邮箱服务器地址")
    yag.send(to="接收报警的邮箱", subject=subject, contents=content)


# 在save_to_mysql函数中添加价格异常检测和报警逻辑
def save_to_mysql(data):
    mydb = mysql.connector.connect(
        host="localhost",
        user="你的用户名",
        password="你的密码",
        database="你的数据库名"
    )
    mycursor = mydb.cursor()
    for item in data.get('items', []):
        title = item.get('title')
        price = item.get('price')
        sales = item.get('sold_total')
        update_time = datetime.now()
        # 查询数据库中该商品的最新价格
        mycursor.execute("SELECT price FROM taobao_products WHERE title = %s ORDER BY update_time DESC LIMIT 1", (title,))
        result = mycursor.fetchone()
        if result:
            old_price = result[0]
            if check_price_anomaly(old_price, price):
                subject = f"商品 {title} 价格异常波动"
                content = f"旧价格：{old_price}，新价格：{price}，请及时关注！"
                send_alert_email(subject, content)
        sql = "INSERT INTO taobao_products (title, price, sales, update_time) VALUES (%s, %s, %s, %s)"
        val = (title, price, sales, update_time)
        mycursor.execute(sql, val)
    mydb.commit()
    mycursor.close()
    mydb.close()

 通过以上步骤和代码，我们成功构建了一个基于淘宝 API 数据接口的商品信息实时监控系统。在实际应用中，你可以根据具体业务需求，进一步扩展和优化系统功能，如增加更多维度的监控指标、优化数据存储和查询性能、集成更强大的数据分析工具等，让系统更好地服务于电商业务发展 。

​

avatar
文章
阅读
粉丝