Files
llm_wiki/tools/experiments/wiki-generation-compare/output/report.md
T

2.8 KiB
Raw Blame History

Wiki 生成质量对比实验报告

实验概览

  • 测试文件: raw/呼吸之间_李谨伯/第一编 从身体入手.md
  • 金标准术语数: 26
  • A 组模式: Two-Step(分析 + 生成)
  • B 组模式: Single-Step(直接生成)
  • 权重配置: 40% 内容完整性 + 30% 技术规范性 + 20% 可维护性 + 10% 效率成本

执行时间

组别 模式 开始时间 结束时间 耗时(分钟) 生成页面数
A 组 Two-Step 2026-07-03 21:02:57 2026-07-03 21:02:57 0.0 10
B 组 Single-Step 2026-07-03 21:02:58 2026-07-03 21:02:58 0.0 8

详细得分

A 组(Two-Step

维度 得分 权重 加权得分
内容完整性 75.4% 40% 30.2
技术规范性 60.0% 30% 18.0
可维护性 80.0% 20% 16.0
效率成本 100.0% 10% 10.0
总分 - 100% 74.2

B 组(Single-Step

维度 得分 权重 加权得分
内容完整性 72.3% 40% 28.9
技术规范性 60.0% 30% 18.0
可维护性 80.0% 20% 16.0
效率成本 100.0% 10% 10.0
总分 - 100% 72.9

详细对比

1. 术语覆盖度

组别 金标准术语数 覆盖术语数 覆盖率 未覆盖术语
A 组 26 10 38.5% 16 个
B 组 26 8 30.8% 18 个

A 组未覆盖术语: 生气, 元气, 出死入生, 返观, 虚静… B 组未覆盖术语: 生气, 元气, 出死入生, 返观, 虚静…

2. Frontmatter 规范性

组别 总文件数 平均字段完整度
A 组 10 100.0%
B 组 8 100.0%
组别 总链接数 有效链接数 无效链接数 链接准确率
A 组 30 0 30 0.0%
B 组 24 0 24 0.0%

4. 内容质量细节

组别 有定义 有来源链接 有行号标注
A 组 10/10 10/10 10/10
B 组 8/8 8/8 8/8

结论

综合评价

A 组(Two-Step 模式)总分更高,推荐使用。

各维度对比

  • 内容完整性: A 组优于 B 组(75.4% vs 72.3%
  • 技术规范性: B 组优于 A 组(60.0% vs 60.0%
  • 效率成本: B 组优于 A 组

附录:生成页面列表

A 组生成页面

天人感应, 玄空造化场, 精气神, 下丹田, 尾闾窍, 意窍, 气海, 泥丸, 开窍, 正身

B 组生成页面

天人感应, 玄空造化场, 精气神, 意窍, 泥丸, 玉枕窍, 晃海, 正身


报告生成时间: 2026-07-03 21:06:23