数据可信度框架

数据可信度框架把判断拆成来源、处理、记录和授权四个方面,每个方面对应可核对的证据。评估围绕具体用途展开,结论写明适用范围和限制,便于采购、合规和研究人员在同一个标准下沟通,减少材料反复补充。

这项评估解决什么问题

数据进入检索、训练或交易之前,常见的问题在于说不清数据从哪里来、经过哪些处理、由谁授权,数据本身往往并不缺。框架把这些说不清的地方转成可以逐项核对的问题,让使用方在投入之前知道还缺哪些证据。

评估围绕一个明确用途展开。用途不同,需要核对的证据不同:内部研究更关注口径与样本,对外发布更关注来源与授权,接口调用还需要确认更新方式和责任分工。

四个方面

四个方面没有先后顺序,缺少哪一项就补哪一项。证据之间可以相互印证,不能相互替代。

方面检查内容需要的证据
来源原始出处、数据提供方、获取方式来源说明、原始文件、发布日期
处理清洗、转换、汇总、补全方式处理说明、字段对照、版本记录
记录时间、范围、口径、变更元数据、变更记录、责任部门
授权权利人、用途、范围、期限授权文件、使用边界、撤回方式

证据怎么核对

证据以能复核为准。口头说明可以作为线索,不能单独支撑结论;无法提供材料的检查项,按“无”或“部分”记录。

检查项的状态与证据对应,避免只写结论不写依据。

  • 来源:核对原始文件、数据提供方说明和发布日期,外部资料还要看合同与授权范围。
  • 处理:核对清洗、转换、汇总和补全的记录,处理规则变化时保留旧版本。
  • 记录:核对元数据、变更记录和责任部门,确认时间、范围与口径能追溯。
  • 授权:核对权利人、用途、范围、期限和撤回方式,超出范围先补充授权。

结论怎么写

结论按可用、限定使用、不可用三档表述。可用指四个方面证据齐全、范围和口径清楚;限定使用指部分证据缺失或范围受限,需要附加条件;不可用指来源、权属或口径无法确认。

结论同时写明适用用途、数据范围和有效条件。局部结论不扩大到全部数据,单一检查项的结果也不代替整体判断。

适用边界

框架判断数据是否适合某个用途,不评价数据提供方的业务能力,也不保证基于数据做出的业务决策。涉及法律定性、审计意见和监管要求时,以专业机构意见为准。

数据用途、范围或授权发生变化时重新评估,保留原结论和变更原因,便于后续核对。评估记录与结论一并保存,便于核对当时依据。

常见问题

四个方面缺一项还能用吗?
缺项要看缺在哪。来源或授权无法确认时按不可用处理;处理或记录部分缺失,可以按限定使用并附加补充条件。
可以只做质量检查吗?
质量检查解决完整、准确、一致等问题,来源与授权仍需单独核对。两类结论分开写,避免互相替代。
结论有有效期吗?
结论与用途、范围和证据绑定。条件不变时可以沿用,条件变化时重新评估。
评估会给出分数吗?
不采用打分排名。每个检查项记录“有、无、部分”,按缺口补充材料。

确定使用范围

结合分级分类,把数据级别、类别和用途对应起来,再进入检查环节。

查看分级分类