القائمة
文献去重助手 - 多源文献合并去重、相似度判断、整理规范题录
التثبيت باستخدام Codex أو Claude انسخ هذا Prompt والصقه في Codex أو Claude أو مساعد آخر ليراجع صفحة Skill ويثبّتها لك.
学术翻译助手 - 中英学术互译、术语统一、摘要翻译、地道学术表达
学术写作助手 - 论文结构(IMRaD)、学术用语、投稿信、回复审稿人
引文管理助手 - APA/MLA/GB-T7714/Chicago 格式、BibTeX、EndNote/Zotero 用法
代码复现助手 - 论文实验复现、环境配置、可复现性检查、常见坑
数据可视化助手 - matplotlib/ggplot/Origin 绘图、科研配图规范、配色与美化
公式识别助手 - 图片/截图中的数学公式转 LaTeX、Mathpix 式输出
استنادا إلى تصنيف SOC المهني
| name | dedup-review |
| description | 文献去重助手 - 多源文献合并去重、相似度判断、整理规范题录 |
| metadata | {"openclaw":{"emoji":"🔍"}} |
从多个数据库（知网、万方、Web of Science、PubMed、Scholar）导出的文献合并时，帮你识别并去除重复，整理成干净的题录库。
| 情形 | 说明 |
|---|---|
| 同篇多库收录 | 知网 + 万方都有 → 按 DOI/标题合并 |
| 预印本 vs 正式 | arXiv 版与期刊版 → 保留正式发表版 |
| 会议 vs 期刊扩展 | 会议论文 + 期刊扩展版 → 按需保留 |
| 中英文版 | 同研究中文版与英文版 → 视需求 |
| 标点/大小写差异 | "A, B" vs "A B" → 归一化后判同 |
我从知网导出 120 条、万方 80 条，帮我说明怎么合并去重
这两条标题很像但年份不同，是同一篇吗？怎么判断？
帮我写个 Python 脚本，按 DOI 去重一个 RIS 文件
import re, json
seen, kept = set(), []
for entry in entries: # entries: list of dict
doi = (entry.get('doi') or '').lower().strip()
key = doi or re.sub(r'[^a-z0-9]', '', entry['title'].lower())[:60]
if key and key not in seen:
seen.add(key); kept.append(entry)
print(f'{len(entries)} -> {len(kept)} (去重 {len(entries)-len(kept)})')