【AI chatbot】大模型评测&流程
·
1、测试策略
A、通过违规,安全等case场景自动化测试固定的问答结果
B、人工抽检(人工核对pdf,知识库,AI接口返回)
C、兼容性测试(不同端APP,IOS, 安卓,ipad)
D、通过裁判promot命令判定(设置LLM大模型,temporature,top-k等指标),对比知识库md文档和AI接口返回结果相似度
更多推荐
1、测试策略
A、通过违规,安全等case场景自动化测试固定的问答结果
B、人工抽检(人工核对pdf,知识库,AI接口返回)
C、兼容性测试(不同端APP,IOS, 安卓,ipad)
D、通过裁判promot命令判定(设置LLM大模型,temporature,top-k等指标),对比知识库md文档和AI接口返回结果相似度
更多推荐
所有评论(0)