Add Comments

This commit is contained in:
马一丁
2025-11-27 09:51:42 +08:00
parent 23356631f4
commit 4e882560da
8 changed files with 192 additions and 16 deletions
+135 -11
View File
@@ -18,7 +18,19 @@ from ReportEngine.utils.config import settings
def find_latest_run_dir(chapter_root: Path):
"""定位包含 manifest.json 的最新章节输出目录。"""
"""
定位章节根目录下最新一次运行的输出目录。
扫描 `chapter_root` 下所有子目录,筛选出包含 `manifest.json`
的候选,按修改时间倒序取最新一条。若目录不存在或没有有效
manifest,会记录错误并返回 None。
参数:
chapter_root: 章节输出的根目录(通常是 settings.CHAPTER_OUTPUT_DIR
返回:
Path | None: 最新的 run 目录路径;若未找到则为 None。
"""
if not chapter_root.exists():
logger.error(f"章节目录不存在: {chapter_root}")
return None
@@ -41,7 +53,18 @@ def find_latest_run_dir(chapter_root: Path):
def load_manifest(run_dir: Path):
"""读取manifest.json并返回report_id与metadata。"""
"""
读取单次运行目录内的 manifest.json。
成功时返回 reportId 以及元数据字典;读取或解析失败会记录错误
并返回 (None, None),以便上层提前终止流程。
参数:
run_dir: 包含 manifest.json 的章节输出目录
返回:
tuple[str | None, dict | None]: (report_id, metadata)
"""
manifest_path = run_dir / "manifest.json"
try:
with manifest_path.open("r", encoding="utf-8") as f:
@@ -58,7 +81,18 @@ def load_manifest(run_dir: Path):
def load_chapters(run_dir: Path):
"""加载章节JSON列表。"""
"""
读取指定 run 目录下的所有章节 JSON。
会复用 ChapterStorage 的 load_chapters 能力,自动按 order 排序。
读取后打印章节数量,便于确认完整性。
参数:
run_dir: 单次报告的章节目录
返回:
list[dict]: 章节 JSON 列表(若目录为空则为空列表)
"""
storage = ChapterStorage(settings.CHAPTER_OUTPUT_DIR)
chapters = storage.load_chapters(run_dir)
logger.info(f"加载章节数: {len(chapters)}")
@@ -66,7 +100,15 @@ def load_chapters(run_dir: Path):
def validate_chapters(chapters):
"""使用IRValidator做快速校验,仅记录警告不阻断流程。"""
"""
使用 IRValidator 对章节结构做快速校验。
仅记录未通过的章节及前三条错误,不会中断流程;目的是在
重装订前发现潜在结构问题。
参数:
chapters: 章节 JSON 列表
"""
validator = IRValidator()
invalid = []
for chapter in chapters:
@@ -84,7 +126,20 @@ def validate_chapters(chapters):
def stitch_document(report_id, metadata, chapters):
"""将章节装订为整本Document IR。"""
"""
将各章节与元数据装订为完整的 Document IR。
使用 DocumentComposer 统一处理章节顺序、全局元数据等,并打印
装订完成的章节与图表数量。
参数:
report_id: 报告 ID(来自 manifest 或目录名)
metadata: manifest 中的全局元数据
chapters: 已加载的章节列表
返回:
dict: 完整的 Document IR 对象
"""
composer = DocumentComposer()
document_ir = composer.build_document(report_id, metadata, chapters)
logger.info(
@@ -95,7 +150,18 @@ def stitch_document(report_id, metadata, chapters):
def count_charts(document_ir):
"""统计IR中的图表数量。"""
"""
统计整本 Document IR 中的 Chart.js 图表数量。
会遍历每章的 blocks,递归查找 widget 类型中以 `chart.js`
开头的组件,便于快速感知图表规模。
参数:
document_ir: 完整的 Document IR
返回:
int: 图表总数
"""
chart_count = 0
for chapter in document_ir.get("chapters", []):
blocks = chapter.get("blocks", [])
@@ -104,7 +170,17 @@ def count_charts(document_ir):
def _count_chart_blocks(blocks):
"""递归统计chart.js组件。"""
"""
递归统计 block 列表中的 Chart.js 组件数量。
兼容嵌套的 blocks/list/table 结构,确保所有层级的图表都被计入。
参数:
blocks: 任意层级的 block 列表
返回:
int: 统计到的 chart.js 图表数量
"""
count = 0
for block in blocks:
if not isinstance(block, dict):
@@ -129,7 +205,20 @@ def _count_chart_blocks(blocks):
def save_document_ir(document_ir, base_name, timestamp):
"""将装订好的IR重新落盘,便于后续复用。"""
"""
将重新装订好的整本 Document IR 落盘。
按 `report_ir_{slug}_{timestamp}_regen.json` 命名写入
`settings.DOCUMENT_IR_OUTPUT_DIR`,确保目录存在并返回保存路径。
参数:
document_ir: 已装订完成的整本 IR
base_name: 由主题/标题生成的安全文件名片段
timestamp: 时间戳字符串,用于区分多次重生成
返回:
Path: 保存的 IR 文件路径
"""
output_dir = Path(settings.DOCUMENT_IR_OUTPUT_DIR)
output_dir.mkdir(parents=True, exist_ok=True)
ir_filename = f"report_ir_{base_name}_{timestamp}_regen.json"
@@ -140,7 +229,20 @@ def save_document_ir(document_ir, base_name, timestamp):
def render_html(document_ir, base_name, timestamp):
"""使用HTMLRenderer渲染并落盘HTML文件。"""
"""
使用 HTMLRenderer 将 Document IR 渲染为 HTML 并保存。
渲染后落盘到 `final_reports/html`,打印图表验证统计信息,方便
观察 Chart.js 数据的修复/失败情况。
参数:
document_ir: 装订完成的整本 IR
base_name: 文件名片段(来源于报告主题/标题)
timestamp: 时间戳字符串
返回:
Path: 生成的 HTML 文件路径
"""
renderer = HTMLRenderer()
html_content = renderer.render(document_ir)
@@ -163,7 +265,18 @@ def render_html(document_ir, base_name, timestamp):
def build_slug(text):
"""将主题/标题转换为安全的文件名片段。"""
"""
将主题/标题转换为文件系统安全的片段。
仅保留字母/数字/空格/下划线/连字符,空格统一为下划线,并限制
最长 60 字符,避免过长文件名。
参数:
text: 原始主题或标题
返回:
str: 清洗后的安全字符串
"""
text = str(text or "report")
sanitized = "".join(c for c in text if c.isalnum() or c in (" ", "-", "_")).strip()
sanitized = sanitized.replace(" ", "_")
@@ -171,7 +284,18 @@ def build_slug(text):
def main():
"""主入口:装订最新章节并渲染HTML。"""
"""
主入口:读取最新章节、装订 IR 并渲染 HTML。
流程:
1) 找到最新的章节 run 目录并读取 manifest
2) 加载章节并执行结构校验(仅警告);
3) 装订整本 IR,保存 IR 副本;
4) 渲染 HTML 并输出路径与统计信息。
返回:
int: 0 表示成功,其余表示失败。
"""
logger.info("🚀 使用最新的LLM章节重新装订并渲染HTML")
chapter_root = Path(settings.CHAPTER_OUTPUT_DIR)