在電商數(shù)據(jù)分析、競(jìng)品監(jiān)控等場(chǎng)景中，獲取淘寶店鋪的所有商品信息是一項(xiàng)極具價(jià)值的任務(wù)。本文將詳細(xì)介紹如何利用 Python 爬蟲技術(shù)結(jié)合淘寶開(kāi)放平臺(tái)的 item_search_shop 接口，獲取指定淘寶店鋪的所有商品數(shù)據(jù)。
一、準(zhǔn)備工作
（一）注冊(cè)淘寶開(kāi)放平臺(tái)賬號(hào)
訪問(wèn)淘寶開(kāi)放平臺(tái)官網(wǎng)，按照頁(yè)面提示填寫相關(guān)信息，包括個(gè)人或企業(yè)的基本資料、聯(lián)系方式等，完成注冊(cè)。
（二）創(chuàng)建應(yīng)用并獲取 API 密鑰
登錄淘寶開(kāi)放平臺(tái)后，創(chuàng)建一個(gè)新的應(yīng)用。在創(chuàng)建過(guò)程中，填寫應(yīng)用的名稱、描述、回調(diào)地址等信息。創(chuàng)建成功后，平臺(tái)會(huì)生成一組 API 密鑰，包括 App Key 和 App Secret，這是調(diào)用接口的身份驗(yàn)證憑證。
（三）申請(qǐng)接口權(quán)限
在“我的應(yīng)用”頁(yè)面，選擇已創(chuàng)建的應(yīng)用，進(jìn)入應(yīng)用詳情頁(yè)。在“接口權(quán)限”模塊，找到“商品服務(wù)”相關(guān)的 API 接口，如“商品詳情”接口，并申請(qǐng)相應(yīng)的權(quán)限。
二、接口調(diào)用
（一）構(gòu)建請(qǐng)求參數(shù)
item_search_shop 接口需要以下參數(shù)：
- app_key：你的應(yīng)用 App Key。
- shop_id：目標(biāo)店鋪的 ID。
- page：當(dāng)前頁(yè)碼。
- sort：排序方式，如按銷量降序（sales-desc）。
- format：返回?cái)?shù)據(jù)格式，如 json。
（二）生成簽名
根據(jù)淘寶開(kāi)放平臺(tái)的要求，需要對(duì)請(qǐng)求參數(shù)進(jìn)行簽名處理。簽名過(guò)程包括：
- 將參數(shù)按字典序排序。
- 拼接參數(shù)為 key=value 形式，并在首尾加上 App Secret。
- 計(jì)算 MD5 值并轉(zhuǎn)為大寫。
（三）發(fā)送請(qǐng)求
使用 requests 庫(kù)向接口發(fā)送 GET 請(qǐng)求，并攜帶構(gòu)建好的參數(shù)和簽名。
三、數(shù)據(jù)解析與存儲(chǔ)
（一）解析響應(yīng)數(shù)據(jù)
接口返回的數(shù)據(jù)通常是 JSON 格式。使用 Python 的 json.loads() 方法將響應(yīng)內(nèi)容解析為字典格式，然后提取所需的商品信息。
（二）存儲(chǔ)數(shù)據(jù)
獲取到的商品數(shù)據(jù)可以保存到本地文件（如 JSON 文件）或數(shù)據(jù)庫(kù)中，方便后續(xù)分析。
四、完整代碼示例
import requests
import hashlib
import time
# 配置參數(shù)
app_key = "your_app_key" # 替換為你的 App Key
app_secret = "your_app_secret" # 替換為你的 App Secret
shop_id = "your_shop_id" # 替換為店鋪 ID
page_size = 100 # 每頁(yè)顯示的商品數(shù)量
page_no = 1 # 初始頁(yè)碼
# 生成簽名
def generate_sign(params):
sorted_params = sorted(params.items(), key=lambda x: x[0])
sign_str = app_secret
for key, value in sorted_params:
sign_str += f"{key}{value}"
sign_str += app_secret
sign = hashlib.md5(sign_str.encode('utf-8')).hexdigest().upper()
return sign
# 獲取店鋪商品列表
def get_shop_items(shop_id, page_no, page_size):
method = "taobao.items.search"
timestamp = time.strftime("%Y-%m-%d %H:%M:%S", time.localtime())
# 構(gòu)造請(qǐng)求參數(shù)
params = {
"app_key": app_key,
"method": method,
"timestamp": timestamp,
"shop_id": shop_id,
"page_no": page_no,
"page_size": page_size
}
# 生成簽名
params["sign"] = generate_sign(params)
# 發(fā)送請(qǐng)求
url = "https://gw.api.taobao.com/router/rest"
response = requests.post(url, params=params)
return response.json()
# 主程序
if __name__ == "__main__":
items = []
while True:
response = get_shop_items(shop_id, page_no, page_size)
if "items_search_response" in response:
items.extend(response["items_search_response"]["items"])
page_no += 1
else:
print("獲取商品列表失?。?, response)
break
# 打印商品信息
for item in items:
print("商品標(biāo)題：", item.get("title"))
print("商品價(jià)格：", item.get("price"))
print("商品圖片鏈接：", item.get("pic_url"))
五、注意事項(xiàng)
（一）調(diào)用頻率限制
淘寶開(kāi)放平臺(tái)對(duì)每個(gè)應(yīng)用的 API 調(diào)用頻率有一定限制。開(kāi)發(fā)者需要合理安排調(diào)用頻率，避免因超出限制而被封禁。
（二）數(shù)據(jù)安全
App Key 和 App Secret 是重要的安全憑證，必須妥善保管，避免泄露。
（三）API 版本更新
淘寶開(kāi)放平臺(tái)可能會(huì)對(duì) API 進(jìn)行更新和升級(jí)。開(kāi)發(fā)者需要及時(shí)關(guān)注官方文檔，確保代碼的兼容性。
通過(guò)上述步驟和代碼示例，你可以輕松實(shí)現(xiàn)獲取淘寶店鋪所有商品信息的目標(biāo)。在實(shí)際應(yīng)用中，還可以根據(jù)需求對(duì)代碼進(jìn)行優(yōu)化和擴(kuò)展，例如增加數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)分析等功能。
如遇任何疑問(wèn)或有進(jìn)一步的需求，請(qǐng)隨時(shí)與我私信或者評(píng)論聯(lián)系。
