# 扫描 PDF 转 EPUB 评测标准与 PDF Craft 实测得分

公开“扫描 PDF 转 EPUB”的 6 项评分维度、121 页抽样规则与匿名盲评方法，并公布 PDF Craft 在 Gemini 与 Deepseek 双盲评下的 78.6–80.0 实测得分、耗时与真实缺陷。

把整本扫描 PDF 转成适合手机与电子书阅读器重排的 EPUB，市面上缺少可直接套用的统一评估方法。我们结合文档解析与电子书领域 4 项公开规范，建立了一套 6 维度、121 页抽样的评分标准，并于 2026 年 11 月 21 日在匿名评测包上由两名评分者（Gemini 与 Deepseek）独立完成了 PDF Craft 的盲评：**加权综合得分在 78.6–80.0 / 100 之间**。

## 一、评测标准

这套标准只测一个明确任务：**把扫描 PDF 识别并重构为原文可重排 EPUB（不含翻译）**。转换速度与费用单独记录，不计入质量分。

### 1. 参考的公开基准

| 公开来源                                                                                    | 借鉴部分                    | 原基准未覆盖的部分                |
| --------------------------------------------------------------------------------------- | ----------------------- | ------------------------ |
| [OCR-D 评估规范](https://ocr-d.de/en/spec/ocrd_eval.html)                                   | 将文字识别误差与版面结构分开评估        | 只看识别率，不评估重排后的阅读体验        |
| [OmniDocBench](https://github.com/opendatalab/OmniDocBench)（CVPR 2025）                  | 拆分正文、表格、公式与阅读顺序独立打分     | 面向文档解析评测，不测 EPUB 目录与跨页脚注 |
| [olmOCR-Bench](https://github.com/allenai/olmocr/blob/main/olmocr/bench/README.md)（Ai2） | 将页面内容拆成明确、可核验的事实检查点     | 以单页 PDF 为主，覆盖不到整书连贯性     |
| [EPUBCheck](https://www.w3.org/publishing/epubcheck/)（W3C / DAISY）                      | 用程序严格校验 EPUB 文件格式、资源与链接 | 只查格式合不合规，不管文字有没有认错       |

> 说明：上述引用仅用于交代方法出处；维度权重与档位规则由我们针对整书阅读场景设定，不代表相关组织的认证或背书。

### 2. 测试样书与抽样规则（9 份样书，共 121 抽样页）

测试集固定包含 5 类共 8 份扫描样书（552 页），输入文件全部锁定校验哈希；另配 1 份 88 页原生数字版艺术图录仅作对照诊断，不计入总分。抽样规则统一为：**30 页以内取全页，超过 30 页的长书取首、中、尾各 4 页（共 12 页）**，合计 121 个抽样页：

| 书籍类型（总分权重）    | 测试样书                                 | 总页数 |  抽样页数 | 重点考察难点                   |
| ------------- | ------------------------------------ | --: | ----: | ------------------------ |
| 文学（25%）       | 《边城》真实扫描                             | 187 |    12 | 中文长篇、对白、多章节目录、插图与竖排题识    |
| 文学（25%）       | Alice in Wonderland Coloring Book    |  20 | 20（全） | 英文图文读本、整页线稿插图            |
| 人文历史（25%）     | 《精神分析技术的基础》第 1 章                     |  24 | 24（全） | 中文学术、页底小字脚注、译者注与外文混排     |
| 人文历史（25%）     | 《抱朴子内篇》第 1 卷（畅玄）                     |  10 | 10（全） | 繁体竖排古籍、大量小字校注            |
| 理工（25%）       | Calculus Made Easy                   | 278 |    12 | 灰底透印老书、海量行内与独立公式、旧制货币、表格 |
| 理工（25%）       | MapVision（CVPR 2024 技术报告）            |   5 |  5（全） | 英文双栏论文、多列数据表、行内公式、参考文献   |
| 技术手册（15%）     | HP LaserJet Pro M404dn Paper trays 章 |  16 | 16（全） | 操作步骤、方向对照表、示意图与警示块       |
| 艺术图录（10%）     | Roman Mosaics（意大利扫描节选）               |  12 | 12（全） | 全幅图版、作品元数据、图注与多组尾注       |
| 艺术图录（对照，不入主分） | Roman Mosaics（原生数字版）                 |  88 |    12 | 用于区分「扫描 OCR 误差」与「版面解析误差」 |

### 3. 六个评分维度、四档量表与合成规则

前 5 项维度拆分为 16 个具体检查点，逐页对照原图与 EPUB 内部结构判读；第 6 项由校验脚本自动计算，不依赖主观判断。

| 评分维度      |  权重 | 具体检查内容                                  |
| --------- | --: | --------------------------------------- |
| **文字准确**  | 30% | 正文逐字准确度、人名地名与数值编号、标点与字符格式               |
| **内容完整**  | 20% | 段落是否完整、跨页与跨栏句子是否续接、图版与注释文字是否保留          |
| **结构与目录** | 20% | 阅读顺序、章节标题识别与层级、目录跳转可用性、脚注双向锚点           |
| **公式与表格** | 15% | 表格行列与表头结构、公式结构（MathML 等）、公式纯文本回退可读性     |
| **排版可读性** | 10% | 版面是否损坏（截断、重叠、异常留白或压段）、标题层级与图注同框         |
| **文件合规性** |  5% | EPUB 容器合法性、XML 规范性、章节清单与图片引用可达性（程序自动计算） |

计分硬规则：

* **四档唯一取值**：正确 = `1`、轻微缺陷 = `0.9`（不影响理解）、重大缺陷 = `0.5`（改变语义或破坏可用性）、关键缺陷或未实现 = `0`。不允许中间档；同一检查点内按最严重问题定档；同一缺陷只在一个最具体维度扣一次，避免重复扣分。
* **关键缺陷直接归零**：产物损坏无法打开，或整本直接用源页图片封装而没有可重排文本，该样书直接记 **0 分**。
* **不适用项（N/A）权重重分配**：仅当源抽样页本身不含表格、公式、注释或图版时才记为不适用，并按比例重分配该维度权重；工具漏转一律不得记为不适用。
* **可复算与盲评**：每条档位必须附页码、源文与产物文字；总分由评分脚本统一计算，手算无效。匿名包内清除厂商名与生成器信息，产物仅以字母代号区分。

## 二、PDF Craft 实测得分（双盲评结果）

本次实测于 2026 年 11 月在 `pdfcraft.ai` 生产环境完成转换（输出 EPUB、开启含脚注精修、关闭翻译，9 份一次提交、未重试、未人工干预），并于 2026 年 11 月 21 日在匿名评测包中由 Gemini 与 Deepseek 按同一量表独立判读。

### 1. 综合成绩与耗时成本

| 评分项        | Gemini 盲评 | Deepseek 盲评 |
| ---------- | --------: | ----------: |
| **加权综合得分** |  **78.6** |    **80.0** |
| 文字准确（30%）  |      72.3 |        76.3 |
| 内容完整（20%）  |      79.3 |        82.7 |
| 结构与目录（20%） |      74.7 |        72.2 |
| 公式与表格（15%） |      71.1 |        71.1 |
| 排版可读性（10%） |      84.4 |        81.7 |
| 文件合规性（5%）  |     100.0 |       100.0 |

* **转换耗时（主要短板）**：8 份主测扫描书（552 页）耗时 **132.1 分钟**（含原生对照共 640 页耗时 **163.1 分钟**），折合 **24.0–25.5 分钟 / 百页**。长书耗时较长，例如 278 页的《Calculus Made Easy》耗时 77.2 分钟。
* **转换费用**：PDF Craft 采用按页按量计费，无月度订阅。标准转换费率为 **$0.30 / 百页**（640 页约 **$1.92**），开启精修模式费率为 **$1.10 / 百页**（640 页约 **$7.04**）；最新费率与充值方式见[充值页](https://pdfcraft.ai/zh-CN/recharge/)。

### 2. 逐样书得分与耗时明细

| 样书                 | 类别   |  页数 | Gemini 盲评 | Deepseek 盲评 |   转换耗时 |
| ------------------ | ---- | --: | --------: | ----------: | -----: |
| 《边城》               | 文学   | 187 |      67.6 |        74.7 | 31.0 分 |
| Alice 涂色书          | 文学   |  20 |      94.9 |        95.7 |  3.1 分 |
| 《精神分析》第 1 章        | 人文历史 |  24 |      88.0 |        87.6 |  6.0 分 |
| 《抱朴子》（畅玄）          | 人文历史 |  10 |      61.6 |        60.6 |  2.4 分 |
| Calculus Made Easy | 理工   | 278 |      77.8 |        80.5 | 77.2 分 |
| MapVision（CVPR 论文） | 理工   |   5 |      74.5 |        71.2 |  2.4 分 |
| HP Paper trays 手册  | 技术手册 |  16 |      92.5 |        96.3 |  5.0 分 |
| 意大利马赛克（扫描）         | 艺术图录 |  12 |      67.0 |        67.6 |  5.0 分 |
| 罗马马赛克（原生对照，不入主分）   | 艺术图录 |  88 |      68.8 |        69.4 | 31.0 分 |

单书得分区间为 **60.6–96.3**。两份独立盲评在 9 本书上的强弱排序高度一致：图文读本（Alice 涂色书）、产品手册（HP 手册）与现代中文学术章节（《精神分析》）表现最好（87.6–96.3）；竖排繁体古籍（《抱朴子》）与多尾注艺术图录失分最多（60.6–69.4）。

### 3. 优势与暴露出的真实缺陷

**做得较好的部分：**

1. **文件合规与表格结构保真度高**：全部 9 份 EPUB 的文件合规检查均为 100 分，无损坏文件或失效链接；数学教材、双栏论文与产品手册中的数据表格均以标准 HTML `<table>` 保留行列结构，未拍扁成散乱空格文本。
2. **公式结构与现代脚注能力**：《Calculus Made Easy》中的分式、根号与上下标以标准 MathML 保留；《精神分析》第 1 章的 22 条脚注中有 21 对生成了完整的双向跳转锚点，点开注释后可直接跳回正文。
3. **图文书与手册还原度稳定**：Alice 涂色书（94.9–95.7）和 HP 手册（92.5–96.3）的正文、专名、操作步骤与原书图版保留完整。

**本轮盲评发现的主要改进空间（按类型归纳）：**

1. **复杂注释锚点部分断链**：在竖排古籍、多尾注图录及部分特殊标记的译者注中，正文引用与注释区之间的双向跳转仍有缺失。
2. **中文长篇章节目录与生僻专名识别不稳定**：部分中文数字章节标题未能完整归入目录层级，个别生僻地名或专有名词仍需人工核对。
3. **双栏跨栏续接与表头下标偏差**：双栏论文在换栏处偶发段落截断，复杂多列表格的表头上下标有时会出现退化或混淆。
4. **公式纯文本回退与特殊符号误识**：MathML 渲染结构完整，但在不支持 MathML 的阅读器或复制检索场景下，部分分式与旧制单位符号可读性会下降。
5. **竖排古籍与复杂图录的排序与索引排版**：竖排校释、整页图版归属以及多栏密集索引在重排后仍可能出现错序或段落合并。

如果要看具体的优势表现、缺陷案例与实拍页面对照，可以继续阅读我们的对比测试报告：[PDF Craft vs Convertio：扫描 PDF 转 EPUB 效果与价格对比](https://pdfcraft.ai/zh-CN/blog/pdf-craft-vs-convertio-pdf-to-epub/)。

## 三、局限说明与横向对照

* **抽样与评测局限**：本分数基于每本 12 页（30 页以内全页）、共 121 页的抽样判读。抽样范围内未发现的问题不代表全书不存在；本分数不是逐字正确率。本次分数由 Gemini 与 Deepseek 基于匿名评测包独立盲评得出，不代表第三方机构认证。
* **横向对照**：如果你想看 PDF Craft 与 Convertio 在同一套 121 页样本上的逐维度、耗时与价格对比，可继续阅读 [PDF Craft vs Convertio：扫描 PDF 转 EPUB 效果与价格对比](https://pdfcraft.ai/zh-CN/blog/pdf-craft-vs-convertio-pdf-to-epub/)。

