Python+京东API实战：自动化抓取商品SKU与详情页数据

最新推荐文章于 2025-06-10 17:36:07 发布

FB13713612741

最新推荐文章于 2025-06-10 17:36:07 发布

阅读量422

点赞数 5

CC 4.0 BY-SA版权

文章标签：爬虫 python 信息可视化数据分析人工智能

本文链接：https://blog.csdn.net/FB13713612741/article/details/146320058

在电商领域，SKU（Stock Keeping Unit，库存进出计量的基本单元）是商品管理的核心概念。对于电商平台如京东，SKU信息不仅关系到商品的库存管理，还直接影响到商品的展示、价格策略、促销活动以及用户体验。因此，获取商品SKU信息对于数据分析、市场研究、竞品分析以及电商运营优化等场景具有重要意义。本文将详细介绍如何使用Python编程语言，通过京东API接口自动化抓取商品SKU与详情页数据。

一、京东API接口简介

京东开放平台为开发者提供了丰富的API接口，涵盖了商品查询、订单管理、物流查询等多个方面。其中，获取SKU详细信息和商品详情的API接口尤为关键。通过这些接口，开发者可以获取到商品的ID、名称、价格、库存、属性、图片等详细信息，为商品管理、价格监控、市场分析等提供有力支持。

1. 注册并获取API权限

要在京东开放平台使用API接口，首先需要注册一个开发者账号，并创建一个应用以获取API使用权限。在创建应用的过程中，需要填写应用的基本信息，如应用名称、应用描述等。提交申请后，京东开放平台会对申请进行审核。审核通过后，将获得AppKey和AppSecret，这两个密钥将用于后续API调用的身份验证。

2. 查阅API文档

在京东开放平台，可以查阅到详细的API文档。文档中包含了各种API接口的调用方法、请求参数和返回结果等信息。对于获取SKU详细信息和商品详情的接口，需要特别关注其请求参数和返回结果，以便正确构造请求和解析响应。

二、Python环境准备

Python是一种功能强大且易于上手的编程语言，广泛应用于数据处理和API接口调用。Python的requests库使得发送HTTP请求变得异常简单，而json库则可以轻松处理JSON格式的数据。这些特性使得Python在爬虫领域备受青睐。

在开始之前，需要确保安装了Python环境，并安装requests、json等库。可以使用以下命令进行安装：

pip install requests

三、获取商品SKU与详情页数据的步骤

1. 构造请求参数

京东API接口通常需要以下参数：

app_key：开发者密钥。
timestamp：请求时间戳。
sign：签名，用于验证请求的合法性。
format：返回数据的格式（通常是JSON）。
v：API版本号。
360buy_param_json：具体接口的参数，以JSON格式传递。

2. 调用API接口

使用Python的requests库编写代码，构建请求并发送API调用。以下是一个使用Python调用京东API接口获取SKU详细信息和商品详情的示例代码：

	`import requests`
	`import json`
	`import hashlib`
	`import time`

	`# 配置信息`
	`APP_KEY = "your_app_key"`
	`APP_SECRET = "your_app_secret"`
	`API_URL = "https://router.jd.com/api"`

	`# 获取签名函数`
	`def get_sign(params, secret):`
	`sorted_params = sorted(params.items(), key=lambda x: x[0])`
	`param_str = "".join([f"{k}{v}" for k, v in sorted_params])`
	`sign_str = param_str + secret`
	`sign = hashlib.md5(sign_str.encode("utf-8")).hexdigest().upper()`
	`return sign`

	`# 获取SKU信息的函数`
	`def get_sku_info(sku_id):`
	`timestamp = int(time.time() * 1000)`
	`params = {`
	`"app_key": APP_KEY,`
	`"timestamp": timestamp,`
	`"format": "json",`
	`"v": "1.0",`
	`"360buy_param_json": json.dumps({"skuId": sku_id})`
	`}`
	`sign = get_sign(params, APP_SECRET)`
	`params["sign"] = sign`

	`response = requests.get(API_URL, params=params)`
	`if response.status_code == 200:`
	`return response.json()`
	`else:`
	`return {"error": "Failed to fetch data"}`

	`# 获取商品详情的函数`
	`def get_item_details(item_id):`
	`timestamp = int(time.time() * 1000)`
	`params = {`
	`"app_key": APP_KEY,`
	`"timestamp": timestamp,`
	`"format": "json",`
	`"v": "2.0",`
	`"method": "jd.item.get",`
	`"360buy_param_json": json.dumps({"itemId": item_id})`
	`}`
	`sign = get_sign(params, APP_SECRET)`
	`params["sign"] = sign`

	`response = requests.post(API_URL, data=params)`
	`if response.status_code == 200:`
	`return response.json()`
	`else:`
	`return {"error": "Failed to fetch data"}`

	`# 示例：获取指定SKU信息和商品详情`
	`sku_id = "123456" # 替换为实际的SKU ID`
	`item_id = "789012" # 替换为实际的商品ID`

	`sku_info = get_sku_info(sku_id)`
	`item_details = get_item_details(item_id)`

	`print("SKU信息:", json.dumps(sku_info, ensure_ascii=False, indent=4))`
	`print("商品详情:", json.dumps(item_details, ensure_ascii=False, indent=4))`

3. 处理响应数据

API接口返回的数据通常是JSON格式的字符串，包含商品的详细信息。以下是返回数据的常见字段：

skuId：SKU ID
name：商品名称
price：商品价格
stock：库存数量
attributes：商品属性（如颜色、尺寸等）

根据实际需求，可以对返回的数据进行进一步解析和处理。例如，提取商品价格和库存信息：

	`if "error" not in sku_info:`
	`sku_data = sku_info.get("data", {})`
	`print(f"商品名称: {sku_data.get('name')}")`
	`print(f"商品价格: {sku_data.get('price')}")`
	`print(f"库存数量: {sku_data.get('stock')}")`
	`print(f"商品属性: {sku_data.get('attributes')}")`
	`else:`
	`print("获取SKU信息失败")`