解决三个缺口:① 放大没复用标定/瓦片数学(LLM 一次 zoom 只出一张,宽区域仍读不清);
②「看清没」由 VLM 自评(易过度自信/幻觉);③ 只能按 handle / 手算 bbox 指认,
图上看到但没 handle 的东西指认不了。
核心思路:把「放大」升级成一个语义化工具——LLM 只指认「要看哪里」,由 agent 复用
tiling.py 的标定数学算出该切几张、每张覆盖多大,用构造保证可读。
新增 dwg_review/inspect.py(agent 侧,不编 DLL):
- TOOL_SCHEMA:inspect_region(target, purpose);target 三形态 {handle} / {window} /
{label,cx,cy,span},purpose = text(8px) / line(6px)。
- InspectState:单图框内「截图标签 → 世界可见范围」登记表,支持逐级下钻
(返回的 inspect-N 可继续作为 label 指认)。
- resolve_target / _point_box:label+cx+cy → WCS。cy 是图像坐标(上→下),
世界 y 必须翻转(y = y2 - cy*H)——单测专门钉住。
- plan_tiles:复用 world_per_px + tiles_for_box + subdivide;超 INSPECT_MAX_TILES(4)
则硬失败并给出「缩小 target / 分多次请求」的指引(不静默降级);拿不到比例/像素
则退回单张并如实告知。
关键几何:CAD 的 _.ZOOM _W 是等比适配(不拉伸),故「截图上的归一化坐标」必须按
max(W/ew, H/eh) 反算真实可见范围(新增 tiling.visible_box)——直接用送进去的窗口会偏。
zoom_to_window 返回的 view 是「加过 margin 的窗口」,不是可见范围,不能混用。
证据层配套:evidence_model.make_image(..., window=) 记录每张图的可见世界范围;
capture_images 用 view_px(overall 图原始像素)+ visible_box 逐张登记。
子循环接入:_run_readonly_tool 在只读白名单校验之前拦截 inspect_region(它不在
READ_ONLY_TOOLS 里,内部只调白名单内的只读 MCP 工具);_review_tools 启用时用
inspect_region 取代三个裸视口工具;inspect_region 计入 _VIEW_TOOLS → 结束复位视口。
配置:INSPECT_ENABLED(True) / INSPECT_MAX_TILES(4)。
端到端实测(真实图纸 1 图框):取证与审查两阶段均在最大化态、结束精确还原(4 项 PASS);
LLM 的 11 次取证调用里 2 次是 inspect_region,且都显式给 window + purpose:"text"
(x[20000,115000] y[-6500,3000],即 A0 图框底部横条=标题栏所在)。
验收口径达成:报告报出标题栏乱码 ???????????????,而 get_text_content 对全图返回 0 条文字
(本图文字全在块/自定义实体内)→ 块内文字是被视觉放大读出来的。
pytest 343 passed。
107 lines
5.4 KiB
Python
107 lines
5.4 KiB
Python
"""审查清单加载 + 系统提示构建(清单驱动)。"""
|
||
|
||
import json
|
||
|
||
from . import config
|
||
|
||
DEFAULT_CHECKLIST = {
|
||
"name": "内置通用清单",
|
||
"categories": [
|
||
{"title": "图层规范性", "severity": "medium",
|
||
"checks": ["图元是否在正确图层", "是否存在空图层/命名异常图层"]},
|
||
{"title": "文字", "severity": "medium",
|
||
"checks": ["空文字", "错别字", "字高异常", "文字重叠"]},
|
||
{"title": "标注", "severity": "high",
|
||
"checks": ["关键尺寸缺失", "标注值异常"]},
|
||
{"title": "几何", "severity": "medium",
|
||
"checks": ["零长度/退化实体", "重复重叠实体", "未闭合轮廓"]},
|
||
{"title": "图面整体", "severity": "low",
|
||
"checks": ["图面完整性", "内容是否超出图框"]},
|
||
],
|
||
}
|
||
|
||
|
||
def load_checklist(path=None):
|
||
"""加载审查清单 JSON;失败时回退内置默认清单。"""
|
||
path = path or config.CHECKLIST_PATH
|
||
try:
|
||
with open(path, "r", encoding="utf-8") as f:
|
||
data = json.load(f)
|
||
if isinstance(data, dict) and data.get("categories"):
|
||
return data
|
||
print(f"[Warn] 审查清单 {path} 结构异常,使用内置默认清单。")
|
||
except Exception as exc: # noqa: BLE001
|
||
print(f"[Warn] 无法加载审查清单 {path}: {exc},使用内置默认清单。")
|
||
return DEFAULT_CHECKLIST
|
||
|
||
|
||
def build_system_prompt(checklist, *, allow_tools=True):
|
||
"""根据审查清单动态生成 LLM 系统提示词。"""
|
||
lines = [
|
||
"你是一名资深建筑与工业厂房图纸审查专家。",
|
||
"你将逐张收到某个图框(一张图纸)的:结构化图元数据、文字内容,以及该图框的视口截图。",
|
||
"",
|
||
f"请依据审查清单《{checklist.get('name', '审查清单')}》逐项审查,"
|
||
"指出**具体问题**(尽量引用实体 handle 或文字内容),并标注严重程度:",
|
||
"",
|
||
]
|
||
for cat in checklist.get("categories", []):
|
||
lines.append(f"【{cat.get('title', '')}】(严重度:{cat.get('severity', 'medium')})")
|
||
for chk in cat.get("checks", []):
|
||
lines.append(f" - {chk}")
|
||
lines.append("")
|
||
|
||
if allow_tools:
|
||
lines += [
|
||
"你可以调用**只读**取证工具进一步确认细节;**不要凭猜测下结论**。",
|
||
"",
|
||
"**看不清某处时,调用 `inspect_region` 指认位置**,它会自动按可读分辨率放大并返回清晰截图。",
|
||
"`target` 三种指认方式任选其一:",
|
||
' - `{"handle": "3A4"}` —— 已知实体句柄;',
|
||
' - `{"label": "tile-3", "cx": 0.4, "cy": 0.6, "span": 0.2}` —— 某张已给截图上的一个位置',
|
||
" (`cx` 从左到右、`cy` **从上到下**,均为 0~1 归一化;`span` 为要看的范围占该截图的比例,默认 0.25);",
|
||
' - `{"window": {"min_x": …, "min_y": …, "max_x": …, "max_y": …}}` —— 直接给世界坐标框。',
|
||
'`purpose` 选 `"text"`(要读文字/标注,默认)或 `"line"`(只看走向/连接,覆盖更广)。',
|
||
"返回的截图会带 `inspect-N` 标签,可继续作为 `label` 指认更细的位置(逐级下钻)。",
|
||
"**你不需要判断截图够不够清楚**——`inspect_region` 会保证返回的图达到可读分辨率;",
|
||
"若它提示区域过大,请缩小 `target`(或用 `span` 缩小范围)后重试。",
|
||
"",
|
||
"结构化数据不足以判断时:用 `get_entity_detail` / `find_duplicate_entities` /",
|
||
"`find_zero_length` / `get_layers` 等查证后再下结论。",
|
||
"",
|
||
]
|
||
|
||
lines += [
|
||
"要求:",
|
||
"- 只报告你**有依据**的问题,不要臆测;数据与截图冲突时以数据为准。",
|
||
"- 按清单条目组织结论,未命中的条目可省略。",
|
||
"- 不要复述输入数据。",
|
||
"",
|
||
"输出格式(**必须严格遵守**):",
|
||
"在你完成全部取证、准备给出该图框的最终结论时,**只输出一个 JSON 对象**,"
|
||
"不要输出任何解释文字,也不要用 markdown 代码块包裹。结构如下:",
|
||
"{",
|
||
' "summary": "<该图框的一句话整体结论;若未发现问题,写“未发现明显问题”>",',
|
||
' "issues": [',
|
||
" {",
|
||
' "category": "<图层/文字/标注/几何/图面整体 之一>",',
|
||
' "severity": "<high|medium|low>",',
|
||
' "message": "<问题描述,简洁具体>",',
|
||
' "handle": "<该问题对应的实体句柄;无法定位到具体实体时省略此字段>"',
|
||
" }",
|
||
" ]",
|
||
"}",
|
||
"其中 `handle` 必须是你**在取证数据或工具返回里真实见过**的句柄,不要编造;"
|
||
"无法确定具体实体时省略 `handle`,该问题仍会被记录。",
|
||
]
|
||
if allow_tools:
|
||
lines.append("(需要进一步确认时先调用工具;拿到结果后,最终再输出上述 JSON。)")
|
||
return "\n".join(lines)
|
||
|
||
|
||
def checklist_summary(checklist):
|
||
"""用于规划阶段的一句话摘要。"""
|
||
cats = checklist.get("categories", [])
|
||
return f"{checklist.get('name', '清单')}({len(cats)} 类:" + \
|
||
"、".join(c.get("title", "") for c in cats) + ")"
|