cheneternity Zotero Fulltext Archiver
Batch 6D production safeguards (Windows CPU / MinerU 3.x)
When a validated Zotero PDF must be run through MinerU on the current Windows CPU environment, use an ASCII-only working copy in a scoped temporary run directory. The Zotero attachment remains read-only. Record the source and working-copy SHA-256 values and do not invoke MinerU until they match.
Use the explicitly validated pipeline backend for this environment. This is
an environment-specific fallback, not a general claim that the hybrid backend
is unsuitable. Give a complete article a hard limit of at least 60 minutes.
A no-progress stop may be used only after 10--15 minutes during which stdout,
stderr, output files, and process CPU time have all remained inactive. Abort
for persistently available RAM below 2 GB only after a sustained observation,
and record the resource samples.
Every invocation must stream timestamped stdout and stderr to the run
directory, record stage transitions, and clean only the MinerU CLI tree and
new mineru.cli.fast_api descendants created by that invocation. Recheck for
those exact processes after cleanup; never terminate unrelated Python work.
Archive only after the raw Markdown gate passes: non-empty full-document front/middle/end samples, source identity, image-file/reference checks, and no missing image targets. Formal archiving may add schema frontmatter and rewrite image paths, but must otherwise preserve the extracted body verbatim.
Before invoking MinerU, inspect the formal 03fulltext path by zotero_key.
If a formal Fulltext already has matching zotero_key/pdf_key, valid
frontmatter, resolved images, and a non-empty article body, reuse it and run
targeted validation. A Note-template repair is not a reason to rerun MinerU.
If page_mapping is unknown, retain that value; the Analytical Writer may
still verify quotation pages directly against the read-only Original PDF.
职责边界
执行：Zotero PDF → MinerU → Fulltext Markdown → 图片整理 → metadata → Note 关联 → validation。
不执行中文翻译、分析笔记写作、批量检索或 Zotero 数据库改写。
1. 先确认实际 MinerU 环境
不要重新安装 MinerU。先搜索 D:\ResearchVault、D:\research 和相关项目中的 MinerU、mineru、magic-pdf、批处理脚本、配置和历史输出。
当前已发现的可复用调用链是：
D:\research\mineru_batch_runner.py → D:\MinerU\.venv\Scripts\mineru.exe → 系统临时输出目录 → D:\ResearchVault_Archive\mineru-staging\。批量输出只能作为外部暂存；逐篇补齐 frontmatter、图片路径和 Note 关联并验证后，才复制到 D:\ResearchVault\03fulltext\<collection>\。
历史 MinerU_test 的页码辅助文件已归档到 D:\ResearchVault_Archive\2026-08-10\MinerU_test\；如需核验历史页码映射可定向读取，但不足以证明所有论文都可可靠映射。
2. 归档路径
正式全文：
D:\ResearchVault\03fulltext\<collection>\<zotero_key>.md
D:\ResearchVault\03fulltext\<collection>\images\<zotero_key>\<image-file>
旧的 MinerU_batch 已归档到 D:\ResearchVault_Archive\2026-08-10\MinerU_batch\，不作为运行时输入或正式全文检索目录。当前 Vault 的分析笔记仍位于 论文库/ 时，不移动它们；仅在全文 frontmatter 中写准确的 note_path。
3. 优先迁移旧结果
若 MinerU_batch 已有与 zotero_key 唯一对应的 Markdown 和图片：
- 确认 Zotero 主键、PDF 键、标题和 Collection。
- 将旧 Markdown 复制到正式
03fulltext/<collection>/<zotero_key>.md；分析笔记中的 Obsidian 链接仍使用fulltext/<collection>/<zotero_key>。 - 将图片复制到
images/<zotero_key>/，不得使用完整论文标题作为目录名。 - 将原有图片引用改为相对于 Fulltext Markdown 的安全路径，例如
。 - 逐一检查每个本地图片引用真实存在；有缺失时不能报告成功。
若没有可复用结果，才调用已确认的 MinerU 可执行文件处理单篇 PDF；不得批量重跑整个库。
4. Fulltext Frontmatter
每个正式全文顶部至少包含：
---
type: literature-fulltext
title: "..."
zotero_key: "Q22PFLNV"
pdf_key: "4RMSR7ZR"
doi: "..."
collection: "创新经济地理"
note_path: "论文库/创新经济地理/论文标题.md"
fulltext_path: "03fulltext/创新经济地理/Q22PFLNV.md"
zotero_item: "zotero://select/library/items/Q22PFLNV"
zotero_pdf: "zotero://open-pdf/library/items/4RMSR7ZR"
source_type: mineru
page_mapping: unknown
---
Vault 内部路径统一使用 /。缺失的 DOI 可留空，但不得伪造。
5. 原文与页码规则
- MinerU Markdown 是证据档案：不翻译、总结、润色、重写、删减或插入模型生成内容。
- 允许的后处理仅包括 frontmatter、机器定位标记和安全图片路径修复。
- 只有当
content_list.json/middle.json等信息与真实 PDF 通过单篇测试可靠对应时，才写page_mapping: reliable或<!-- pdf_page: N -->。 - 0-based/1-based 转换必须记录并用真实 PDF 验证；无法可靠映射时写
page_mapping: unknown，不要猜 page。
6. 关联与校验
归档完成后：
- 分析笔记补
fulltext_path，并可增加[[fulltext/<collection>/<zotero_key>]]入口；不因全文归档重写整篇笔记，模板化重排由zotero-analytical-writer单独负责。 - Fulltext 补
note_path，确认双方zotero_key、pdf_key一致。 - 运行
D:\research\zotero_batch\validate_research_vault_literature_links.py，只报告，不自动删除。 - 只有 PDF、Fulltext、图片、Note、链接均有效时，才向 Collection Manager 报告 COMPLETE。