知识库建成那天,最危险的一句话是「数据都进来了,后面应该没问题」。在 LLM 时代这句话尤其危险:数据持续流入(事件流、定时爬取、人工录入),Agent 还在持续写入(工具调用的落库结果、LLM 抽取的三元组)——LLM 会自信地漏字段、自信地编造实体类型、把「合同」写成「协议」。没有运行时校验的知识库,几周之内就会被污染成「看起来有结构、实际上不可信」的垃圾场。
本篇把校验和推理从「建模阶段的一次性检查」搬进「生产环境的常驻运行时」:数据流入时怎么拦、违规结果怎么分级处置、推理器怎么在运行中维护一致性,以及开放世界与闭世界两种语义如何各司其职。

校验不是一次性动作,而是运行时常态
传统数据栈里,校验常被放在 ETL 阶段:数据进来跑一遍质量检查,之后进了数仓就不再过问。这套习惯在静态报表时代勉强够用,在知识库场景下完全不成立,原因有三个。
第一,写入方变多了。过去只有 ETL 任务写库,现在事件流、定时爬取、人工录入、Agent 的工具调用结果、LLM 的信息抽取产物都在写。LLM 抽取尤其需要警惕:它不是偶发出错,而是持续地产出「格式正确、语义可疑」的数据,每一次写入都是一次潜在的污染。
第二,消费方变敏感了。知识库的下游不再只是报表,还有做推理的引擎和做决策的 Agent。一条类型错误的三元组,可能让推理器推出一批荒谬结论,再被 Agent 当成事实复述给用户。垃圾进、垃圾出,在推理链条上被放大。
第三,数据库自带的约束层在图上基本失效。关系库有 NOT NULL、外键、CHECK 约束,图数据库大多只有节点和边,没有原生的约束层。SHACL(Shapes Constraint Language)正是补上这一层的标准:2017 年成为 W3C 推荐标准,用「形状(Shape)」描述数据必须满足的约束,与具体存储引擎无关,可以嵌进任何写入路径。
校验的经济学也不对称:一次写入只有一次校验成本,而一条坏数据的下游成本是乘性的——检索结果被污染、推理结论被带偏、Agent 的回答失去可信度,事后排查与修复的开销远高于写入时拦截。工程结论很直接:把校验尽量前移到写入路径,「图建完再补校验」是最贵的一条路。
小结:校验要像数据库约束一样在线运行,而不是像单元测试一样偶尔跑一次。
SHACL 运行时链路
一条数据从流入到入库,SHACL 运行时的链路分四步:约束评估、违规聚合、分级处置、结果监控。
先看约束怎么写。下面这个 Turtle 示例定义了「采购订单」的形状:
@prefix sh: <http://www.w3.org/ns/shacl#> .
@prefix ex: <http://example.org/procurement#> .
@prefix xsd: <http://www.w3.org/2001/XMLSchema#> .
ex:PurchaseOrderShape a sh:NodeShape ;
sh:targetClass ex:PurchaseOrder ;
sh:property [
sh:path ex:status ;
sh:in ( "CREATED" "APPROVED" "RECEIVED" "CANCELLED" ) ;
sh:minCount 1 ;
sh:maxCount 1 ;
] ;
sh:property [
sh:path ex:amount ;
sh:datatype xsd:decimal ;
sh:minInclusive 0 ;
sh:maxCount 1 ;
] ;
sh:property [
sh:path ex:submittedBy ;
sh:class ex:Employee ;
sh:minCount 1 ;
] .
三个属性约束各管一件事:status 必须是四个枚举值之一且恰好一个(sh:in 加基数约束);amount 必须是非负小数;submittedBy 必须指向 Employee 类型的节点且至少一个——这是图上才好表达的关系约束,相当于「跨表外键」。
评估引擎对每个目标节点执行约束,把违规聚合为一个校验报告(sh:ValidationReport):顶层谓词 sh:conforms 是布尔值,false 表示存在至少一条违规;每条违规是一个结果节点,携带 sh:focusNode(违规的焦点节点)、sh:resultPath(出问题的属性路径)、sh:resultMessage(人可读的错误描述)与 sh:resultSeverity(严重级别)。这套校验报告词汇表由 W3C SHACL 规范定义,是所有兼容引擎的公共输出格式——这意味着校验结果可以标准化地流入任何下游系统,不绑定某一家引擎。
闭包约束值得一提。sh:closed true 把形状变成白名单:目标节点出现任何未声明的属性都算违规。它防的是 LLM 时代最常见的污染形态——「顺手多写一个字段」。抽取器幻觉出本体里没有的属性时,开着的形状不闻不问,闭着的形状当场拦截。代价是约束维护变重:本体每加一个属性都要同步改 Shapes,因此闭包约束通常只用于边界实体(写入面最小、最关键的类型),内部类型保持开放。
拿到报告后做分级处置,而不是一刀切拦截:
- 拦截:必填字段缺失、枚举值非法这类契约违规,直接拒绝写入,返回焦点节点与原因;
- 降级:字段可疑但不致命(如单位缺失、置信度低),允许入库但打上数据质量标记,下游检索默认排除;
- 修复队列:结构性问题(如实体对不上已知类型)进入人工或自动修复流程,修复后重新走校验。
小结:链路的关键不是「拦住一切」,而是让每一类违规都有明确去处。
推理运行时:一致性检查、实例分类与物化
校验管「数据合不合规矩」,推理管「数据合不合逻辑」。OWL 推理器在运行时做三类事。
一致性检查:发现矛盾断言。比如本体定义了「设备」与「耗材」互斥(disjoint),某条数据把一个个体同时断言成两者,推理器立刻报告不一致。这类错误对人工不可见,对依赖推理的 Agent 却是毒药——在描述逻辑语义下,不一致的本体可以导出任意结论,等于整个推理层报废。
实例分类:根据已有断言自动归类。本体里定义「高风险资产」为「年均停机次数大于等于三的设备」,当某台设备的停机记录写入后,推理器自动把它归入高风险资产,应用代码不需要维护分类逻辑;类别定义调整时,重分类自动生效。
物化(materialization):把推理结论预计算存回库中。所有推理出来的三元组(继承的类型、隐含的关系)在写入时算好落盘,查询时像查普通数据一样直接取——把推理成本从每次查询挪到每次写入。
性能分级是选型的核心。描述逻辑推理器分档:ELK 这类 EL 推理器牺牲表达力换速度,适合大图上跑分类与物化;HermiT、Pellet 支持完整的 DL 表达力,适合小图上做严格一致性检查;Apache Jena 内置的规则推理器介于两者之间,适合自定义规则驱动的轻量推理。截至 2026-11,这组工具仍是生产环境的常见组合。
何时用前向链物化、何时用查询时推理?经验法则:读多写少、查询延迟敏感的场景选物化——加载时算好,查询零推理成本;写入频繁、查询模式无法预知的场景选查询时推理——避免每次写库都触发全图重算。物化还要配套失效策略:写入一批数据后局部重算受影响的子图,而不是全量重建。
还有一个常被忽略的问题:推理由谁触发。生产里通常三种触发点并存——写入后触发(新数据到达后对受影响子图做局部一致性与分类)、定时触发(低峰期跑全图一致性体检,结果进监控)、按需触发(高风险决策前对相关子图做一次严格检查)。全图物化在写入时同步完成只适合中小规模;大规模图的物化要退到异步管道,接受「推理结论短暂滞后于写入」的窗口期,并把滞后时长做成可观测指标。
小结:推理运行时的两难是「表达力对速度」,解法是分档混用,让不同查询走不同档位。
开放世界与闭世界的运行时分工
RDF 与 OWL 采用开放世界假设(Open World Assumption,OWA):图里没断言,不等于它为假——没写「订单有审批人」,可能只是这条数据还没同步完。推理器必须对不完备宽容,否则不完整的图会推出海量伪矛盾。
SHACL 则采用闭世界语义:约束评估只看当前数据图,sh:minCount 1 就是「当前图里没写就是违规」,sh:closed true 就是「出现未声明的属性就是违规」。
两者看似打架,实际是互补的分工:
- 推理层用开放世界语义,负责在「图可能不完备」的前提下维护逻辑一致性与隐含知识——它回答「从已知能推出什么」;
- 校验层用闭世界语义,负责把数据契约执行到底——它回答「这份提交合不合格」。
同一个例子:一条订单缺 submittedBy,推理器不会报错(没说不等于不存在),SHACL 会拦下(契约要求必填)。反过来,一条逻辑矛盾的数据可能通过 SHACL 的全部约束(每条属性单独看都合法),却会被推理器的一致性检查抓住。运行时里两层都要有:SHACL 是闸门,推理器是体检。
小结:开放世界管推理的完备性,闭世界管契约的严肃性,别让任何一层替另一层上班。
工程实践
四条经过验证的实践,覆盖从分级到监控。
校验分级:fatal、warn、info
不要让所有违规共享一个退出码。在约束上声明严重级别(sh:severity,默认 sh:Violation,可设 sh:Warning、sh:Info),引擎按 sh:resultSeverity 输出分级结果:fatal 拦截、warn 打标、info 记录。分级标准要写进数据契约文档,且与处置动作一一对应——「分级」只有配上「分级处置」才有意义。
Shapes 是代码:版本化与评审
Shapes 文件要当代码管理:进版本库、走评审、带变更说明。Shapes 的每次修改都是契约变更——放宽约束可能放进坏数据,收紧约束可能拦截合法写入。发布前用历史数据回放(把最近一个月的写入流跑一遍新 Shapes)评估影响面,回放出的新增违规清单就是评审的核心材料。上线的 Shapes 版本要随校验报告一起落日志,出问题时能精确回答「当时生效的是哪一版规则」。
增量校验:只校变更子图
全量校验在千万级三元组上不现实。写入路径上只校验本次变更涉及的焦点节点及其一跳邻域;全量校验留给低峰期的后台任务与发布前的 CI 流水线。增量与全量的结果差异本身就是监控信号——差异大说明 Shapes 或引擎行为有漂移,值得人工介入排查。
校验结果进监控
把 sh:ValidationReport 变成指标:违规总量、违规率(违规数除以写入数)、违规类型分布、新出现的违规类型。新类型违规的告警尤其重要——LLM 抽取器升级、上游 schema 变更,最先的信号往往就是「冒出来一种没见过的违规」。
与数据质量工具的类比与差异
Great Expectations 这类工具用「Expectation」声明列级断言(某列非空、取值在区间内),面向表格与数仓管道;SHACL 用「Shape」声明图上的约束,天然支持跨节点的关系约束(「订单的提交人必须是在职员工」)。两者不互斥:结构化数据用 GX 或同类工具守管道,图谱用 SHACL 守闸门;如果团队只维护一份约束清单,可以把两者当作同一份数据契约在两种数据模型上的投影。差异的本质是模型——表有行列,图有路径,约束语言必须各自原生。
小结:运行时校验的工程化程度,决定了知识库半年后是资产还是负债。
参考资料
- Shapes Constraint Language (SHACL) — W3C Recommendation —— 2017 年版规范,校验报告词汇表(
sh:ValidationReport、sh:conforms)的权威定义。 - SHACL 1.2 Core — W3C —— 演进中的新版核心规范,约束语义与报告结构的最新口径。
- Validating RDF data with SHACL —— 实操视角的 SHACL 入门,示范 Shapes 编写与报告解读。
- SHACL background — SPHN Semantic Framework —— 医疗语义框架对 SHACL 的工程化说明,含完整报告示例。
- Great Expectations —— 表格数据质量框架,与 SHACL 做类比与分工时的参照物。
读者留言
COMMENTS 暂无还没有留言,来说第一句?