Files
llm_wiki/tools/experiments/wiki-generation-compare/output/report.md
T

98 lines
2.8 KiB
Markdown
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
# Wiki 生成质量对比实验报告
## 实验概览
- **测试文件**: raw/呼吸之间_李谨伯/第一编 从身体入手.md
- **金标准术语数**: 26
- **A 组模式**: Two-Step(分析 + 生成)
- **B 组模式**: Single-Step(直接生成)
- **权重配置**: 40% 内容完整性 + 30% 技术规范性 + 20% 可维护性 + 10% 效率成本
## 执行时间
| 组别 | 模式 | 开始时间 | 结束时间 | 耗时(分钟) | 生成页面数 |
|------|------|----------|----------|-------------|-----------|
| A 组 | Two-Step | 2026-07-03 21:02:57 | 2026-07-03 21:02:57 | 0.0 | 10 |
| B 组 | Single-Step | 2026-07-03 21:02:58 | 2026-07-03 21:02:58 | 0.0 | 8 |
## 详细得分
### A 组(Two-Step
| 维度 | 得分 | 权重 | 加权得分 |
|------|------|------|---------|
| 内容完整性 | 75.4% | 40% | 30.2 |
| 技术规范性 | 60.0% | 30% | 18.0 |
| 可维护性 | 80.0% | 20% | 16.0 |
| 效率成本 | 100.0% | 10% | 10.0 |
| **总分** | - | **100%** | **74.2** |
### B 组(Single-Step
| 维度 | 得分 | 权重 | 加权得分 |
|------|------|------|---------|
| 内容完整性 | 72.3% | 40% | 28.9 |
| 技术规范性 | 60.0% | 30% | 18.0 |
| 可维护性 | 80.0% | 20% | 16.0 |
| 效率成本 | 100.0% | 10% | 10.0 |
| **总分** | - | **100%** | **72.9** |
## 详细对比
### 1. 术语覆盖度
| 组别 | 金标准术语数 | 覆盖术语数 | 覆盖率 | 未覆盖术语 |
|------|-------------|-----------|--------|-----------|
| A 组 | 26 | 10 | 38.5% | 16 个 |
| B 组 | 26 | 8 | 30.8% | 18 个 |
**A 组未覆盖术语**: 生气, 元气, 出死入生, 返观, 虚静…
**B 组未覆盖术语**: 生气, 元气, 出死入生, 返观, 虚静…
### 2. Frontmatter 规范性
| 组别 | 总文件数 | 平均字段完整度 |
|------|---------|---------------|
| A 组 | 10 | 100.0% |
| B 组 | 8 | 100.0% |
### 3. Wikilink 质量
| 组别 | 总链接数 | 有效链接数 | 无效链接数 | 链接准确率 |
|------|---------|-----------|-----------|-----------|
| A 组 | 30 | 0 | 30 | 0.0% |
| B 组 | 24 | 0 | 24 | 0.0% |
### 4. 内容质量细节
| 组别 | 有定义 | 有来源链接 | 有行号标注 |
|------|--------|-----------|-----------|
| A 组 | 10/10 | 10/10 | 10/10 |
| B 组 | 8/8 | 8/8 | 8/8 |
## 结论
### 综合评价
**A 组(Two-Step 模式)总分更高,推荐使用。**
### 各维度对比
- **内容完整性**: A 组优于 B 组(75.4% vs 72.3%
- **技术规范性**: B 组优于 A 组(60.0% vs 60.0%
- **效率成本**: B 组优于 A 组
## 附录:生成页面列表
### A 组生成页面
天人感应, 玄空造化场, 精气神, 下丹田, 尾闾窍, 意窍, 气海, 泥丸, 开窍, 正身
### B 组生成页面
天人感应, 玄空造化场, 精气神, 意窍, 泥丸, 玉枕窍, 晃海, 正身
---
**报告生成时间**: 2026-07-03 21:06:23