arxiv

name	arxiv
description	获取今日 arxiv 论文，筛选大语言模型基模和训练系统相关论文
user-invocable	true
allowed-tools	WebFetch
context	fork

arxiv 今日论文筛选

任务

从 arxiv 获取今日新论文，筛选出与 大语言模型基模 和 训练系统 相关的论文，并以结构化格式呈现。

数据获取

第一步：尝试 RSS

使用 WebFetch 抓取：

https://rss.arxiv.org/rss/cs.AI+cs.CL+cs.LG+cs.CE+cs.DB+cs.DC+cs.MA+cs.OS+cs.SY

提取所有 <item> 中的 title、link、dc:creator（作者）、description（摘要）。

第二步：如果 RSS 为空则回退到 API

RSS 在周末/假期可能为空。此时使用 WebFetch 抓取 arxiv API：

https://export.arxiv.org/api/query?search_query=cat:cs.AI+OR+cat:cs.CL+OR+cat:cs.LG+OR+cat:cs.DC+OR+cat:cs.DB&sortBy=submittedDate&sortOrder=descending&max_results=50

从 Atom XML 中提取 title、id（URL）、author、summary。

arXiv 分类代码

代码	全称	说明
cs.AI	Artificial Intelligence	人工智能
cs.CL	Computation and Language	计算与语言（NLP）
cs.LG	Machine Learning	机器学习
cs.DC	Distributed, Parallel, and Cluster Computing	分布式与并行计算
cs.DB	Databases	数据库
cs.CE	Computational Engineering	计算工程
cs.MA	Multiagent Systems	多智能体系统
cs.OS	Operating Systems	操作系统
cs.SY	Systems and Control	系统与控制

筛选规则

从所有获取到的论文中，筛选与以下主题相关的论文：

大语言模型基模（LLM Foundation Models）：

• 关键词：LLM, large language model, foundation model, language modeling, pretraining, pre-training, scaling law, tokenization, architecture (transformer variants), mixture of experts, MoE, long context, multimodal foundation

训练系统（Training Systems）：

• 关键词：training system, distributed training, parallel training, data parallel, model parallel, pipeline parallel, tensor parallel, training infrastructure, training efficiency, GPU cluster, training framework, DeepSpeed, Megatron, FSDP, checkpointing, mixed precision, gradient compression, communication optimization, training at scale

筛选时综合考虑标题和摘要内容，不要仅做简单关键词匹配——理解论文的实际主题。

主列表 vs 相关系统方向

上面两类命中的论文进主列表。此外还有一类通用训练/系统方向的论文：

• 涉及 checkpointing / 分布式与并行计算 / 容错（fault tolerance）/ 通信优化 / HPC 系统等系统关键词，
• 但并非面向大语言模型训练（如通用 HPC 数据流容错、给 MPI 程序自动加检查点、抗静默数据损坏的任务复制等）。

这类论文不要丢弃，也不要混入主列表——单独归到输出的「相关系统方向」小节（见输出格式）。判断依据是「是否服务于大模型训练」：服务于 → 主列表；只是通用系统 → 相关系统方向。

输出格式

## arxiv 今日筛选

────────────────────────────────────────
  #: 1
  标题: Paper Title
  作者: Author1, Author2, ...
  摘要: 2-3 句中文摘要
  链接: http://arxiv.org/abs/xxxx.xxxxxv1

每篇论文之间用 ──────────────────────────────────────── 分隔。

主列表之后，若有通用训练/系统方向的论文，追加一节（同样逐条列出，格式一致）：

## 相关系统方向（非面向 LLM 训练）

────────────────────────────────────────
  #: 1
  标题: Paper Title
  作者: Author1, Author2, ...
  摘要: 2-3 句中文摘要
  链接: http://arxiv.org/abs/xxxx.xxxxxv1

若该节无论文则整节省略。

注意事项

• 所有非论文原文的内容用中文输出
• 在开头注明数据来源（RSS 还是 API）和获取到的论文总数
• 如果筛选后没有相关论文，明确告知用户
• 如果今天完全没有新论文（周末），告知用户 arxiv 周末不更新，并展示最近提交的相关论文