跳到正文
原文
arXiv cs.AI· Julie Krugler Hollek, Michael Zargham, Mala Kumar·· 4 小时前AI 评分28

基于本体的上下文 AI 评估(OB-CAIE)方法论

Ontology-Based Contextual AI Evaluations (OB-CAIE) Methodology

AI 导读

OB-CAIE(基于本体的上下文 AI 评估)方法论用领域专属本体 DSO 与评估过程本体 EPO 明确界定测试范围,以解决 AI 评估中测试覆盖不清、可复现性不足的问题。DSO 回答"测什么",EPO 回答"怎么测",同一问题空间可支撑一项或多项 AI 评估。在人类反馈真正不可替代的复杂领域,该方法论允许在特定节点引入人工判断,失败点也可在问题空间内被追踪、可视化与分析。

来源:arXiv cs.AI · arxiv.org