| name | jiuyangongshe-stock-industry-logic |
| description | 爬取韭研公社个股产业逻辑与异动解析。输入个股名（如白银有色），自动获取该股异动解析、题材标签、相关文章与产业逻辑内容。 |
| metadata | {"hermes":{"category":"web-scraping","tags":["jiuyangongshe","韭研公社","异动解析","产业逻辑","股票研究","scraping"]}} |
韭研公社个股产业逻辑爬取
按个股名爬取韭研公社（jiuyangongshe.com，原韭菜公社）上该股的产业逻辑 / 异动解析内容。输入"白银有色"这类个股名，输出该股的题材标签、异动解析全文、相关文章列表。
触发条件
- 用户要求"爬取/查询某只股票的产业逻辑、异动解析、题材逻辑"
- 用户给出一只 A 股个股名（或代码），需要韭研公社上的题材/产业链/异动内容
- 用户提到"jiuyanggongshe"（拼写错误，正确为 jiuyangongshe）
核心方法（无需登录，SSR 直取）
站内搜索页 https://www.jiuyangongshe.com/search/<任意>?k=<URL编码个股名>&type=<tab> 的 SSR HTML 内嵌 window.__NUXT__ JSON，无需登录即可拿到结构化数据。tab 类型：
| type | 含义 | list 内容 |
|---|
1 | 全部 | 含该股标签的全部文章（paginate.totalCount 为总数） |
2 | 标题标签 | 标题含该股的文章 |
5 | 异动（核心） | 该股异动解析文章（官方"韭菜团子"发布，标题如"08月24日白银有色股票异动解析"），content 含完整产业逻辑 |
8 | 纪要 | 卖方纪要转载 |
product | 红宝书 | 付费产品文章（content 截断） |
announcement | 公告 | 公告相关 |
stock | 股票 | 股票实体信息（stock_id/code/node 板块） |
user | 用户 | 用户搜索结果 |
步骤
- 解析
window.__NUXT__（核心脚本：scripts/fetch_stock_logic.py，支持任意个股名，自动做 股票实体 + 异动解析 + 相关文章 三重抓取）：
python3 scripts/fetch_stock_logic.py "白银有色"
脚本输出（JSON）：
stock: stock_id / code / node（板块，如 hs_a=沪市A股）actions: 异动解析列表（title / content / article_id / create_time / integral），默认取最新 15 条（SSR 第一页）articles: 相关文章列表（全部 tab 第一页 15 条：title / author / create_time / stock_list）pagination: 各 tab 的 totalCount（异动解析总条数、相关文章总数）
- 补抓文章详情（如需全文/评论区）：
curl -sL -A "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 Chrome/120.0 Safari/537.36" \
"https://www.jiuyangongshe.com/a/<article_id>" -o article.html
详情页同样内嵌 window.__NUXT__，可提取完整 content / stock_list / like_count / comment_count / integral。
- 异动解析 content 结构（已知模式）：开头为题材标签行（如"黄金+白银+特种电缆（核聚变）"），随后 1、2、3… 编号要点（产能/业务/催化/产业链卡位）。汇总多期异动解析可还原该股的核心产业逻辑全集。
陷阱（实测 2026-08-26）
- 域名拼写：用户常写
jiuyanggongshe.com（多一个 g），正确是 jiuyangongshe.com。错误的域名 DNS NXDOMAIN。
- 分页在 SSR 不生效：
page/pageNo/pageIndex/offset 参数全部无效，SSR 永远只渲染第一页 15 条。完整分页数据需登录走 API（未登录 302）。方案：第一页 15 条足够提炼产业逻辑；如要全量，提示需登录。
- 搜索路径第 1 段任意：
/search/x?k=名称 与 /search/名称?k=名称 均可，真正生效的是 k 参数（个股名 URL 编码）+ type 参数。
- API 全部需登录：
/api/v1/*（共 113 端点）未登录统一 302 回首页，无法直接调。SSR 内嵌 NUXT 是唯一公开数据通道。
- SSR 响应慢且间歇 500：首页/文章页实测 30-170s、10 次请求 3 次失败。必须 curl 加
--max-time 60，失败重试 2-3 次，间隔 2-5s。搜索页相对快（1-3s）。
- NUXT 提取：
window.__NUXT__=(function(a,b,...){return {...}});</script> 形式，用 Node eval 提取最稳（脚本已内置）。
- 股票可能搜不到：
list 为空 / checkStock=-1 / stock_id 字段与 k 不同 → 个股名不在站内（新股/未收录/北交所部分）。如实返回"未收录"，不编造。
- 红宝书（product）content 截断：付费内容只有摘要，
user_read_limit=1 表示需订阅，勿伪造全文。
- 异动解析文章可含多只股票标签：一篇"X股异动解析"可打多只股票标签（如搜"英维克"命中的第一条标题可能是"08月25日金富科技股票异动解析"，因该文同时标签英维克）。判断依据是 content 内容而非标题——过滤/汇总时以 content 是否真讲该股为准，标题仅作参考。
--article-dir 详情页抓取较慢（每篇 30-170s），默认只抓前 3 篇，失败已容错不中断主流程。- 反爬防护（已内置）：多 UA 轮换（7 个常见浏览器 UA）+ 全局限速（默认 4s/请求，
--delay 可调）。单股调用 3 请求天然安全；批量 >50 股务必 --delay 5 以上。注意：站点 API 有动态加密（DYNAMIC_CRYPTO_ENABLED=true）但只作用于登录态，SSR 公开页面目前无验证码/滑块。
验证
stock 返回 code（如 sh601212）与个股名对应；actions[0].title 匹配 <日期><个股名>股票异动解析 格式；pagination.totalCount > 0 表示站内有该股数据。
支持文件
scripts/fetch_stock_logic.py — 主脚本：个股名 → 股票实体 + 异动解析 + 相关文章（JSON 输出，含 NUXT 提取与重试）scripts/extract_nuxt.js — Node 提取器：HTML → NUXT JSON（fetch_stock_logic.py 自动调用）
