定位AI产品场景
·
一、定位AI产品场景
(一)衡量模型能力边界
1、有一个测评标准,如:
多模态准确率测评
(1)表格:题目类别、题目照片、题目文字、正确答案、输入照片题目时GPT的回答、是否回答正确(通过是否答对问题智能体判断)、输入文字题目时GPT的回答、是否回答正确
(2)判断gpt是否答对问题的prompt模板 (题目input1) 正确答案{input2} 学生的回答{input3} 请问学生是否回答正确,你只输出“对”或“错”,
其余一律不要输出 最终生成的prompt
(3)统计每个分类 图片、和文字不同的准确率 并汇总均值
(二)判断能力提升可行性
做正确率适当,有提升空间的。不做正确率极高通过对话框就能做到的,也不做正确率极低微调成本很高的
(三)绘制市场格局,并找到有价值空间
应用场景价值提升
(1)在原有坐标轴上向右向下探索
(2)构建新的横向坐标轴
更多推荐


所有评论(0)