知乎专栏文章列表采集
知乎专栏文章列表采集工具。当用户给出知乎专栏主页链接(www.zhihu.com/column/<slug>),需要批量采集该专栏下的文章标题、链接、作者、发布时间、赞同数、评论数、摘要,或提到"知乎专栏文章列表/这个专栏都写了什么/采集某专栏的文章/知乎专栏批量导出"时使用本 skill。走浏览器插件端采集(需节点已登录知乎)。**1 页 = 1 点数(约 20 条);按实采条数退差,零结果全额返还(注册送 10 点)。**
skillhub install @aidata/zh-articles
README 文档
4,674 字知乎专栏文章列表 Skill(zh-zhuanlan)
AI 调用来源参数(必填)
所有会访问后端 API 的命令必须携带 --skill-name zh-articles 和 --ai-entry <AI工具标识>(例如 claude-code、codex、workbuddy)。IP 无需传递,由服务端自动获取。首次缺参会告警放行,第二次起拒绝。
示例:node cli.js quota --skill-name zh-articles --ai-entry claude-code。
封装「小红书能力平台」(FastAPI,/api/v1)的 CLI:提交知乎专栏链接 + 页数 → 派发给已登录知乎的采集节点 → 逐页拉专栏文章列表 → 导出 CSV(Excel 直开)。
- 能采什么:专栏内每篇文章的文章 ID、标题、链接、作者名/作者 ID、摘要、发布时间、赞同数、评论数、页码。
- 省心机制:1 点/页(每页约 20 条,实采 17~20 条属正常)、零结果按实采退差、抓取异常全额返还、Agent 友好(stdout 纯 JSON + 统一退出码)。
- ★ 依赖采集节点已登录知乎:知乎对游客全拦(
40352 unhuman人机墙),服务端直连拿不到数据。必须由浏览器插件在已登录知乎的节点上、于知乎页面上下文里发起请求(免x-zse-96签名)。没有在线节点时任务排队,超时后全额返还。 - 不支持:文章正文与详情(用
zh-article-detail)、单篇文章评论(用zh-pinglun)、用户主页、问题回答、全站搜索;提交前就报错、不扣费。
点数不足怎么办(自动扫码充值)
跑命令时如果点数不够,CLI 不会直接报错退出,而是自己建一张充值单、把二维码打在终端里:
点数不足,已自动创建充值单 RO2611051712281481f36de19
金额 10.00 元 → 100 点(支付宝)
<二维码色块>
[pay] 已支付
已到账:+100 点,继续执行原命令
- 在终端里跑:手机支付宝/微信对着终端扫码 → 付完点数自动到账 → 原命令自动重跑,不用手动再来一遍。
- AI agent / 非交互环境(管道、重定向):CLI 不阻塞等待,而是返回订单号和充值页地址
{服务地址}/recharge.html。把链接交给用户,他在网页扫码付款,付完重跑原命令即可(点数会自动到账)。 - 主动充值:
node cli.js pay --yuan 50 --skill-name zh-articles --ai-entry <ai-entry>(不传--yuan默认 10 元;可加--channel alipay或--channel wechat)。 - 不想自动充值:设环境变量
XHSNOAUTO_PAY=1,则恢复旧行为(只提示点数不足)。 - 换算:1 元 = 10 点,注册送 10 点。
客服支持
注册或使用过程中遇到任何问题,请引导用户联系客服:
- 客服微信(扫码添加):http://st.aidata366.com/assets/concat.png
- AI 余额引导规则(必须执行):先执行
quota,同时查看返回的quota和flag。若quota = 0且flag = 0,必须向用户同时提供两种方案并让其二选一:①主动添加客服微信,免费赠送 10 点数(提供上方客服微信);②直接充值。不要替用户默认选择;若quota = 0且flag ≠ 0,只引导用户充值,不要再宣传微信免费赠送。 - 客服电话:18722121663
收费价格
- 点数换算:0.1 元 = 1 点数。
- 1 页 0.1 元(1 页 = 1 点数,约 20 条文章)。
- 注册即送 10 免费点数,充值或大量购买可享优惠,请联系客服 18722121663 洽谈。
参数(提交前必读)
| 参数 | 取值 | 默认 |
|---|---|---|
--url | 知乎专栏链接(www.zhihu.com/column/<slug>),每个任务 1 个 | — |
--pages | 采集页数,1~10(每页约 20 条) | 1 |
--wait | 等待任务跑完再返回(默认超时 300s) | 关 |
--force | 已失效(后端无去重,重提即新任务) | 关 |
- 该能力每个任务只采 1 个专栏,需要采多个专栏请分多次
submit。 --pages 3表示最多拉 3 页(预扣 3 点);某页返回条数少于 20 不代表到头(知乎会过滤删除/异常条目),终止只按接口paging.is_end。- 链接可以不带协议头(
www.zhihu.com/column/c_1261258401923026944也能识别);zhuanlan.zhihu.com域不认/column/。 - 预览/试采建议
--pages 1,确认专栏正确再加页数。
前置条件
- Node.js ≥ 18(使用内置 fetch,零 npm 依赖)。
- 不注册不登录没有任何点数:10 免费点数在注册成功后发放。
- 首次使用先
register --link或login --link,成功后 token 自动保存。 - 配置文件在
~/.xhs-platform/config.json(与其它平台 skill 共用账号体系),可用XHSCONFIGPATH覆盖。 - 后端地址默认
http://st.aidata366.com,可用config set base-url <url>或单次--base-url覆盖。 - ⚠️ 安全提示:默认地址是明文 http,token 会明文传输;
config.json含 token,不要泄露、不要提交 git。
输出规约(重要)
- stdout 只输出 JSON:成功
{"ok":true,"data":{...}},失败{"ok":false,"code":<码>,"message":"..."}。 - 交互提示、轮询进度走 stderr,不要解析。
- 退出码:
0成功;1参数/用法错误;2认证失败;3点数不足;4网络/服务不可达;5其它业务错误。
命令清单
node cli.js register --link --skill-name zh-articles --ai-entry <ai-entry>
node cli.js login --link --skill-name zh-articles --ai-entry <ai-entry>
node cli.js submit --url <专栏链接> [--pages 3] [--wait] --skill-name zh-articles --ai-entry <ai-entry>
node cli.js query <task_id> [--wait] --skill-name zh-articles --ai-entry <ai-entry>
node cli.js export <task_id> [--wait] [--out zh_articles.csv] --skill-name zh-articles --ai-entry <ai-entry>
node cli.js quota --skill-name zh-articles --ai-entry <ai-entry>
node cli.js version
submit
# 采第 1 页(约 20 篇),不等待
node cli.js submit --url https://www.zhihu.com/column/c_1261258401923026944 --skill-name zh-articles --ai-entry <ai-entry>
# 采前 3 页并等待完成
node cli.js submit --url https://www.zhihu.com/column/c_1261258401923026944 --pages 3 --wait --skill-name zh-articles --ai-entry <ai-entry>
返回 taskid。--wait 会在 stderr 打出实采条数与 settlecharged/refunded_diff。
export
node cli.js export <task_id> --wait --out 专栏文章.csv --skill-name zh-articles --ai-entry <ai-entry>
CSV 两段:# 任务汇总(专栏 ID、链接、状态、实采条数、请求页数、实收/退差点数)+ # 知乎专栏文章列表明细(columnid/columnname/articleid/title/url/authorname/authorid/excerpt/publishtime/voteupcount/commentcount/pageno/fetchedat)。
支持的链接
专栏 https://www.zhihu.com/column/c_1261258401923026944
(不带协议头 / 不带 www 的写法也收,统一归一化为 https://www.zhihu.com/column/<slug>)
其它链接(文章页 / 用户主页 / 问题页 / 回答 / 搜索结果 / 想法 / 其它站点)一律拒绝,提交前就报错、不扣费。
典型工作流(agent 照此执行)
- 确认登录:
node cli.js quota --skill-name zh-articles --ai-entry <ai-entry>,报1002就先login --link。 - 先采 1 页试水:
submit --url <专栏链接> --pages 1 --wait,看collectedcount与columnname是否是用户要的专栏。 - 确认后加页数:
submit --url <专栏链接> --pages 3 --wait(预扣 3 点)。 - 导出:
export <task_id> --wait --out 专栏文章.csv。 - 汇报:说清实采多少条、扣了多少点、退了多少点(读
settlecharged/refundeddiff)。
错误处理指引
| 现象 / code | 含义 | 该怎么做 |
|---|---|---|
1001 / PARAM_ERROR | 链接不是专栏、页数超范围 | 按提示换链接或减页数;不会扣费 |
任务 failed + 未登录 | 采集节点浏览器没登录知乎 | 让用户在插件所在浏览器登录知乎,再 --force 重提 |
任务 failed + 不可用 | 专栏不存在 / 已删 / 无权限 | 如实告知用户,不返还(业务侧结果) |
NETWORK_ERROR | 服务不可达 / 超时 | 检查网络与 config show 里的 base_url;必要时 config set base-url |
1002 | 未登录 / token 失效 | 执行 login --link 重新登录 |
3001 | 点数不足 | 告知用户余额与本次所需点数,引导充值或联系客服 |
计费规则提示
- 1 页 = 1 点数(0.1 元),每页实际返回约 17~20 条(知乎侧会过滤删除/异常条目,属正常)。
- 预扣按
--pages计算;实际按采到的页数/条数结算,差额自动返还(refunded_diff)。 - 零结果(专栏无文章 / 全部被过滤)→ 全额返还。
- 专栏不存在、已删除、无权限 → 不返还(业务侧结果,不是故障)。
- 采集节点未登录、触发风控、页面异常 → 全额返还(不让用户为环境问题付费)。
红线
- 不要替用户改链接:贴错类型(文章/用户/问题/回答链接)直接报错更安全,不要猜。
- 不要承诺「一定能采到」:内容可能已删除/被删/评论区关闭,这类不返还点数。
- - 不要用本 skill 采正文:列表只有摘要和计数,正文/配图要用
zh-article-detail。 - 不要承诺「一页就是 20 条」:知乎会过滤,实采 17~20 条都正常,按条数汇报。
- 不要把 token 写进日志或聊天记录。
同分类其他技能
查看全部 ›中国金融机构数据爬取与分析综合 Skill v12.1.0。2334家/43大类机构名单、60+财经媒体源舆情、 A股报告/公告/研报、
303 99.4万 MysteelAI - 智能问数我的钢铁网(Mysteel)大宗商品价格行情数据查询技能,基于钢联/隆众数据平台提供专业价格数据服务。覆盖黑色金属、有色金属、能源化工、
9 75万 smart-charts32种图表,3 个主题,2步生成: 1.上传数据 — 将 CSV / Excel / JSON 等格式的数据文件拖入对话框; 2.查看结
149 74.3万 论文配图一键生成论文配图一键生成:一条命令从 JSON/CSV/Excel 生成顶刊级学术图表,科研绘图 与期刊配图全场景覆盖。41 种图表(森林图/K
91 52.8万 smart-chartsIntelligent chart generation and data analysis skill. Reads user-sup
2 37.9万 股票/基金/期货量化分析工具全球智能投研工具(stock-researcher)v14.0:多源数据 + 概率预测 + 批量研究 + 可导出报告。 核心能力: -
152 26.5万