京东商品数据采集
京东商品数据采集(商品详情 / 商品评论)。当用户需要采集京东商品详情、商品评论,或提到"京东商品详情/京东评论采集/商品评论分析/商品数据分析"时使用。对接数据API中转平台,按次扣点,批量任务前可免费查询余额与单价。
skillhub install @aidata/jd-api
README 文档
6,681 字Skill:京东数据采集(jd-data)
对接「AI数据平台」,采集京东商品详情与商品评论。 每次调用消耗平台点数,单价以 GET /api/v1/account/balance 返回的 price 字段为准 (会随服务成本调整,不要在代码或脚本里写死;查询余额本身不扣点)。
一、前置条件(缺一不可,先向用户确认)
| 项 | 说明 |
|---|---|
| 平台地址 | https://zlh.aidata366.com(正式服务,直接可用);也可用环境变量 JDPLATFORMBASE_URL 覆盖 |
| API Key | 推荐直接运行 login 自动获取并保存到本机(见下文「首次使用」);也可显式设置环境变量 JDPLATFORMAPI_KEY,优先级更高 |
| 点数 | 新用户注册赠送 1000 点;余额不足时按「五、客服与充值」处理:flag=0 把「加微免费领点」和「充值」两个选项给用户二选一,flag≠0 只引导充值 |
没有 Key 时不要尝试调用:会返回
40100,且浪费排查时间。先执行login拿 Key。
首次使用:一条命令完成登录(推荐)
没有 API Key 时,不要让用户手动去创建,直接执行:
python jd_api.py login --skill-name jd-data --ai-entry claude-code
把输出里的「二维码图片 / 授权链接」发给用户,让用户扫码或打开链接登录并点「确认授权」。 用户确认后执行(pending 时退出码为 6,3~5 秒后重试即可):
python jd_api.py login_check --access-token <上一步输出的 access_token> --skill-name jd-data --ai-entry claude-code
成功后 API Key 会自动保存到 ~/.zhiliaohou/config.json(仅本机),以后所有命令直接调用即可, 无需再设置环境变量;四个 skill 共用这份凭证。授权链接 10 分钟内有效且只能使用一次。
备选:手动注册 + 创建 Key(浏览器操作,约 1 分钟)
没有账号或自动登录失败时走这条路;先注册,再执行上面的 login 即可自动保存 Key。
- 注册:浏览器打开
https://zlh.aidata366.com/auth/register?skill=jd-data,填手机号 →
输入右侧图片验证码 → 点「获取短信验证码」→ 填入收到的 6 位短信码 → 提交。 用户名和初始密码由平台自动分配,注册成功页会一次性显示(请提醒用户立即记录,尤其是 初始密码;登录后可在「总览」页修改)。注册即送 1000 点(注册赠送流水可在「总览」页看到; 出于防薅考虑,同一 IP 每天最多注册 3 个账号)。 注意:注册必须由用户本人在浏览器完成(图片验证码与短信验证码无法、也不应被脚本绕过), agent 可以代填其余配置,但不要尝试替用户注册。
- 创建 API Key:登录后进入左侧「API Key」页,起个名字点创建。**明文 Key 仅创建成功后的
那一次页面显示**,立刻复制保存;关掉页面后只能看到前缀(jh_ 开头 10 位),丢了只能重新创建。
- 配置环境变量后即可上手:
export JD_PLATFORM_BASE_URL="https://zlh.aidata366.com"
export JD_PLATFORM_API_KEY="jh_xxxxxxxx"
登录支持两种方式:手机号 + 短信验证码,或用户名 + 密码(注册成功页显示的自动分配凭据)。
预算预期:当前无免费额度(free_quota=0),注册赠送的 1000 点 ≈ 5 次商品详情(180 点/次) 或 3 次商品评论(300 点/次),足够体验与联调;批量采集前先按「四、计费纪律」做预算预检。
二、安装与 30 秒上手
安装:本 skill 只有两个文件(SKILL.md + jdapi.py),jdapi.py 为 Python 纯标准库实现 (零第三方依赖,Python 3.8+ 可跑),把整个 jd-data/ 目录放入 agent 的 skills 目录即完成安装, 无需 pip 安装任何东西。
AI 调用来源参数(必填)
所有会访问后端 API 的命令必须携带 --skill-name jd-data 和 --ai-entry <AI工具标识>(如 claude-code)。IP 无需传递,由服务端自动获取。 首次缺参会告警放行,第二次起拒绝。 login / login_check 也建议携带这两个参数,其余采集命令必须携带。
export JD_PLATFORM_BASE_URL="https://zlh.aidata366.com"
export JD_PLATFORM_API_KEY="jh_xxxxxxxx"
python jd_api.py balance --skill-name jd-data --ai-entry claude-code # 免费:余额 + 各接口单价
python jd_api.py goods_detail 10174613130151 --skill-name jd-data --ai-entry claude-code # 商品详情
python jd_api.py goods_comment 100118481919 1 --skill-name jd-data --ai-entry claude-code # 商品评论(第 1 页)
python jd_api.py goods_comment 100118481919 1 --out ./comment_p1.json --skill-name jd-data --ai-entry claude-code # 大响应写文件
参数支持三种写法:位置参数 / key=value / 整段 JSON。 批量脚本里建议统一用 key=value 或 JSON,避免位置错位。
CLI 退出码:0 成功 | 2 参数或配置错误(未发请求、未扣点)| 3 鉴权或点数问题 | 4 本次取数失败 | 5 网络问题 | 6 等待用户完成授权(login_check 轮询时)。 判断成败请看退出码,不要靠 grep 输出。
三、接口清单(均 POST,JSON body)
| 用途 | 命令 | 路径 | 必填 | 可选 |
|---|---|---|---|---|
| 商品详情 | goods_detail | /api/v1/jd/goods_detail | goods_id | — |
| 商品评论 | goods_comment | /api/v1/jd/goods_comment | goods_id,page | — |
| 余额/单价(免费) | balance | GET /api/v1/account/balance | — | — |
| 登录授权(免费/不扣点) | login | POST /auth/cli-session | — | — |
| 校验授权并保存 Key(免费/不扣点) | login_check | POST /auth/cli-session/check | --access-token | — |
只允许传表内参数:平台只转发已声明的字段,多余字段会被丢弃——你以为加了筛选条件,实际没生效。 CLI 会在本地直接拒绝未知参数(退出码 2)。
选型建议:
- 商品基础信息(标题/价格/图片/规格/店铺)用
goods_detail; - 评论列表、评分、追评、商家回复、评论汇总统计用
goods_comment; - 评分数组在
item[]里,好评率在goodrate(0~1 小数),最大页码看pagecount。
四、计费纪律(必须遵守)
- 任何批量任务开始前,先
balance:
- 总成本 = 计划调用次数 × 对应接口
price 总成本 > balance时停止并告知用户差额(按pointsperyuan折算成元),
再按「五、客服与充值 → 余额不足时怎么引导」用 flag 决定话术 (flag=0 把「加微免费领点」和「充值」并列给用户二选一,flag≠0 只引导充值)
- 单次任务预计超过 50 次调用,先向用户确认预算再执行
- 循环中每 20 次复查一次
balance,发现余额骤降立即停止 - 拿到
40200(点数不足)立即停止,不要重试,按flag分支引导(见「五、客服与充值」) - 拿到
40300(限频)等待约 60 秒再继续;批量任务默认串行 + 每次间隔 0.5~1 秒 - 拿到
50001(数据服务暂不可用)停止任务,告知用户稍后再试
五、客服与充值
余额不足时怎么引导用户(按 flag 分流,不要凭猜测)
balance 为 0(或不够本次任务)时,先看接口返回的 flag / wechatgiftclaimed:
| 接口返回 | 该用户 | 你必须这样说 |
|---|---|---|
flag = 0(wechatgiftclaimed=false) | 还没领过加微赠送 | 二选一摆给用户自己挑:① 加客服微信免费领取赠送点数(扫码见下,加好友后报平台用户名,到账即可继续);② 直接充值(见下方「充值方式」)。两者都补一句"到账后我立刻接着跑",不要只推一个、也不要替用户决定 |
flag ≠ 0(wechatgiftclaimed=true) | 已领过(1 待发放 / 2 已发放) | 不要再提加微免费领点,只引导充值(见下方「充值方式」) |
判断只看接口字段:
40200报错里也带flag,拿不到就直接跑一次balance(免费、不扣点)。 不要猜测用户是否加过微信;对flag≠0的用户反复推活动会被当成骚扰。
客服支持
注册或使用过程中遇到任何问题(注册失败、点数充值、数据结果异常、批量采购等), 请引导用户联系客服,不要自行尝试绕过或代用户操作:
- 客服微信(扫码添加):<http://st.aidata366.com/assets/concat.png>
- 加客服微信免费领赠送点数(每个账号限一次):扫码加好友后把平台用户名发给客服,核实后在平台加点;
只在余额为 0 且 flag=0 时与「充值」并列提供给用户选择,flag≠0 的用户不要再提(点数以客服告知为准,到账看 balance)
- 客服电话:18722121663
充值方式(当前为人工充值阶段)
- 联系客服确认充值金额,批量/大额采购可洽谈优惠;
- 当前兑换率:1 元 = 1000 点(1 点 = 0.001 元;按当前单价约可调用
商品详情 5 次/元、商品评论 3 次/元,以 balance 返回的实时 price 为准);
- 转账后把平台用户名 + 转账凭证告知客服,管理员加点后到平台「充值说明」页
刷新即可看到余额到账;
- 点数永不过期;余额、冻结与累计消费可在平台「总览」页自助查询。
到账以平台「充值说明」页显示为准;充值前不需要把 API Key 或密码发给客服。
六、幂等与重试(防重复扣点)
平台按 Idempotency-Key + 「接口 + 请求体指纹」做幂等:
- CLI 已内置:默认自动生成幂等键,网络错误/响应超时/并发已满时自动重试 1 次并复用该键,
重试不会重复扣点。键会打印在 stderr(# 幂等键: task-xxx),手工续跑时用 --idem 复用。
- 手工 curl 或自写脚本时:同一次业务调用的所有重试必须复用同一个键,换接口或改参数会被判
40910。 - 调节重试次数:
--retry 0(不重试)~--retry 3;超时:--timeout 60。
python jd_api.py goods_detail 10174613130151 --idem task-0001 --skill-name jd-data --ai-entry claude-code # 指定键
python jd_api.py goods_detail goods_id=10174613130151 --retry 2 --timeout 60 --skill-name jd-data --ai-entry claude-code
七、错误码与处置
| code | 含义 | 可重试 | 处置 |
|---|---|---|---|
40000 | 请求体非法 | 否 | 修正 payload(必须是 JSON 对象),不要原样重发 |
40100 | API Key 无效 | 否 | 检查 JDPLATFORMAPI_KEY,或让用户重新创建 Key |
40101 | API Key 已停用 | 否 | 让用户到平台「API Key」页启用/新建 |
40200 | 点数不足 | 否 | 停止任务,按 flag 引导:flag=0 让用户「加微免费领点 / 充值」二选一,flag≠0 只引导充值 |
40201 | 接口未开放 | 否 | 该接口已停用,联系客服确认(见「五、客服与充值」) |
40300 | 触发限频 | 是 | 等约 60 秒,降低并发/加间隔 |
40910 | 幂等键冲突 | 否 | 该键已用于其它接口或其它参数 → 换新键 |
40911 | 同键请求处理中 | 是 | 等 2~3 秒用同一键重试一次 |
50000 | 本次取数失败 | 否 | 把 msg 转告用户;响应里会显示本次退款点数,未退款表示该次成本已产生 |
50001 | 数据服务暂不可用 | 否 | 停止任务,稍后再试 |
50002 | 数据服务响应超时 | 是 | 用同一幂等键重试(结果不确定,平台保留幂等记录) |
50003 | 平台并发已满 | 是 | 降低并发后重试 |
响应包统一为 {"code":0,"msg":"success","data":{...},"requestid":"req..."}。 失败时 data 含 balance(当前余额)与 refunded(本次退回点数);msg 与 request_id 要一并转告用户。
八、批量采集范式
# 1) 预算预检
python jd_api.py balance --skill-name jd-data --ai-entry claude-code
# 2) 串行 + 每任务独立幂等键 + 大响应落盘 + 失败不中断整批
mkdir -p out
i=0
while read -r gid; do
i=$((i+1))
python jd_api.py goods_detail "goods_id=$gid" --idem "batch-$(date +%Y%m%d)-$i" \
--out "out/$gid.json" --skill-name jd-data --ai-entry claude-code
rc=$?
case $rc in
0) ;; # 成功
3) echo "第 $i 条:鉴权或点数问题,终止"; break ;;
4) echo "第 $i 条:本次取数失败,跳过 $gid" ;; # 已按规则退款/标记,继续下一条
5) echo "第 $i 条:网络异常,稍后重跑(复用同一 --idem 键)"; sleep 5 ;;
esac
sleep 0.5 # 主动节流,避免 40300
done < goods_ids.txt
goodsid 从链接取:https://item.jd.com/<goodsid>.html。
九、数据要点(踩坑清单)
- 详情价格:SKU 内
price可能不准,以顶层price为准;多个规格看skus.sku[]。 - 详情标题/店铺:
title、nick、shopid、sellerinfo.shop_name。 - 评论(
goodscomment):评论列表在item[],每条含ratecontent(正文)/score(1~5)/
ratedate(时间)/ displayusernick(昵称)/ pics[](晒图)/ auctionsku(规格)/ addfeedback(追评);好评率在 goodrate(0~1 小数);总条数看 totalresults, 最大页码看 pagecount。
- 评论为空是正常业务结果:
code=0但item为空,通常是该商品无评论或该页无数据,
不要当异常重试(重试只会白扣点)。
- 图片地址:部分字段是
//img*.360buyimg.com/...协议相对地址,展示时补https:。
十、排障
- 记录
requestid(响应体里,或错误信息末尾),到平台「调用记录」页按 requestid 查:
可看到扣点、退款、失败原因与耗时。
50000且本次退款为 0:该次取数成本已产生,按平台规则不退;如需申诉把 request_id
通过客服(见「五、客服与充值」)提交给运营。
- 「获取商品评论失败」:多为该商品本身无可采评论,换个 goods_id 试,不要循环重试。
- 全部请求都失败:先
balance—— 若返回40100/40101是 Key 问题;若连接被拒/超时,检查平台地址,
以及本机是否挂了代理(CLI 默认不使用系统代理;确有需要时用 JDPLATFORMPROXY 显式指定)。
十一、安全要求
- API Key 只从环境变量或本机配置
~/.zhiliaohou/config.json读取,**不要写进脚本、
不要提交到仓库**;登录成功时终端会显示一次,不要把该输出转发到公开渠道。
- 不要把 Key 拼进 URL 或日志;分享排障信息时只给
request_id。 - 不要并发轰炸平台(默认串行);单个 Key 的频率上限由平台配置决定。
触发词
京东商品详情、京东评论采集、商品评论筛选、评论按评分排序、商品数据分析
同分类其他技能
查看全部 ›中国金融机构数据爬取与分析综合 Skill v12.1.0。2334家/43大类机构名单、60+财经媒体源舆情、 A股报告/公告/研报、
303 99.4万 MysteelAI - 智能问数我的钢铁网(Mysteel)大宗商品价格行情数据查询技能,基于钢联/隆众数据平台提供专业价格数据服务。覆盖黑色金属、有色金属、能源化工、
9 75万 smart-charts32种图表,3 个主题,2步生成: 1.上传数据 — 将 CSV / Excel / JSON 等格式的数据文件拖入对话框; 2.查看结
149 74.3万 论文配图一键生成论文配图一键生成:一条命令从 JSON/CSV/Excel 生成顶刊级学术图表,科研绘图 与期刊配图全场景覆盖。41 种图表(森林图/K
91 52.8万 smart-chartsIntelligent chart generation and data analysis skill. Reads user-sup
2 37.9万 股票/基金/期货量化分析工具全球智能投研工具(stock-researcher)v14.0:多源数据 + 概率预测 + 批量研究 + 可导出报告。 核心能力: -
152 26.5万