apexcolab深港智汇 · FDE交流合作
FDE培养 / FDE培训|06|应用评测与安全运行

FDE COURSE

06.1 评测与治理认知:什么证据才能证明应用可用

学习以版本化测试和可追溯证据评估应用可用性

课程介绍

本课程围绕“什么证据才能证明应用可用”展开。学员将把用户任务转化为通过与失败样例,固定资料、模型、提示词和工具版本,建立正常、缺失、冲突、越权及服务异常等测试场景,并从质量、稳定、安全与责任维度记录判定。课程还强调训练、开发、测试及挑战集之间的样本隔离,以及保存失败、修复和复验证据。课堂结果仅用于学习判断,不能直接证明生产可用。

你将学会

  • 能够依据用户任务编写通过与失败样例
  • 能够区分事实、分类和越权边界问题
  • 能够建立带版本与来源组的测试集
  • 能够保存失败、修复与复验记录

课程内容

  • 06.1.1 理解原理与任务
  • 06.1.2 从用户任务写出通过与失败样例
  • 06.1.3 固定测试版本与样本分组

适合谁学

  • 需要评估大模型应用输出质量的实践者
  • 需要整理评测样本与验收证据的团队成员

开始前需要什么

  • 具备基本的模型应用测试与样例阅读能力

核心技能

  • 任务成功标准编写
  • 通过与失败样例设计
  • 版本化测试集构建
  • 样本分组与隔离
  • 输出错误归因
  • 评测证据留存