在當今的電子商務時代，獲取商品信息對于商家和消費者都具有重要意義。1688 作為國內知名的 B2B 電商平臺，提供了豐富的商品數據。通過利用 Python 爬蟲技術，我們可以自動化地獲取 1688 平臺上按關鍵字搜索的商品信息，從而為數據分析、市場調研等提供有力支持。
一、準備工作
（一）注冊 1688 開發者賬號
在開始爬取之前，需要在 1688 開放平臺注冊一個開發者賬號，并創建一個新的應用。通過創建的應用，開發者可以獲得應用的 app_key 和 app_secret，這是后續請求接口時身份驗證的重要依據。
（二）環境準備
確保你的開發環境中已安裝以下工具和庫：
- Python 3.x：確保已安裝 Python 的最新版本。
- Requests 庫：用于發送 HTTP 請求。
- Pandas 庫：用于數據處理和分析。
- 可以通過以下命令安裝所需的庫：
- bash
pip install requests pandas二、獲取 Access Token
大多數 API 接口都需要一個 Access Token 來進行身份驗證。這通常需要通過 OAuth2.0 授權流程獲取，涉及到 app_key 和 app_secret 的交換。
以下是一個示例函數，用于獲取 Access Token：
Python
import requests
def get_access_token(app_key, app_secret):
url = "https://eco.taobao.com/router/rest"
params = {
"app_key": app_key,
"app_secret": app_secret,
"grantType": "client_credentials",
"timestamp": int(time.time())
}
response = requests.get(url, params=params)
return response.json().get("access_token")三、構建 API 請求
1688 的關鍵詞搜索商品 API 接口允許開發者通過輸入特定的關鍵詞，在 1688 平臺上搜索并獲取相關商品的列表信息。此接口支持自定義配置勾選條件，如價格、銷量、月代銷區間等，以滿足開發者多樣化的搜索需求。
（一）請求參數
- q：搜索關鍵字
- start_price 和 end_price：設置價格范圍
- page：指定返回結果的頁碼
- page_size：設置每頁顯示的商品數量
- sort：設置商品的排序方式，如按價格從低到高（price）、銷量從高到低（_sale）等。
（二）生成簽名
1688 的 API 要求所有請求都需要簽名，以確保請求的安全性。簽名的生成規則通常包括將所有請求參數按字典序排序，拼接成字符串，然后使用 app_secret 進行加密。
以下是一個簡單的簽名生成函數：
Python
import hashlib
import hmac
import time
import urllib.parse
def generate_sign(params, secret):
sorted_params = sorted(params.items())
sign_str = "&".join(["%s=%s" % (urllib.parse.quote(k), urllib.parse.quote(str(v))) for k, v in sorted_params])
sign_str = sign_str + "&secret=" + secret
sign = hmac.new(secret.encode("utf-8"), sign_str.encode("utf-8"), hashlib.md5).hexdigest().upper()
return sign（三）發送請求
以下是一個完整的 Python 代碼示例，展示了如何使用 1688 的關鍵字搜索接口：
Python
import requests
import time
def search_products(keyword, page=1, page_size=40, sort="price"):
app_key = "YOUR_APP_KEY"
app_secret = "YOUR_APP_SECRET"
access_token = get_access_token(app_key, app_secret)
params = {
"app_key": app_key,
"method": "alibaba.item.search",
"format": "json",
"v": "2.0",
"sign_method": "md5",
"timestamp": str(int(time.time())),
"q": keyword,
"page": page,
"page_size": page_size,
"sort": sort
}
sign = generate_sign(params, app_secret)
params["sign"] = sign
response = requests.get("https://gw.api.taobao.com/router/rest", params=params)
return response.json()
keyword = "女裝"
result = search_products(keyword)
if result:
for item in result.get("item_list", []):
print(item.get("title"), item.get("price"))四、解析返回數據
API 調用成功后，你會收到一個包含關鍵詞數據的 JSON 響應。使用 Python 的 json 庫或 pandas 庫可以方便地解析和處理這些數據。
以下是一個示例，展示如何解析返回的數據：
Python
import pandas as pd
def save_to_csv(data, filename="product_data.csv"):
df = pd.DataFrame(data)
df.to_csv(filename, index=False, encoding="utf-8")
product_data = result.get("item_list", [])
save_to_csv(product_data)五、注意事項
（一）遵守法律法規
在進行網頁爬取時，務必遵守相關法律法規，尊重網站的 robots.txt 文件規定。
（二）合理設置請求頻率
避免過高的請求頻率導致對方服務器壓力過大，甚至被封禁 IP。
（三）數據存儲
獲取的數據應合理存儲，避免數據泄露。
六、總結
通過上述步驟，你可以使用 Python 爬蟲程序通過 API 接口獲取 1688 關鍵詞數據，為電商企業提供數據支持。務必注意遵守法律法規和網站政策，合理使用爬蟲技術。希望這篇文章能幫助你在電商數據獲取的道路上更進一步。
如遇任何疑問或有進一步的需求，請隨時與我私信或者評論聯系。
