技术布道 | Prompt评估与优化,让魔法打败魔法,通过大模型获得更优质的Prompt进而获得更优质的内容
大模型输出的内容跟Prompt如何设计有非常大的关系,为什么不让魔法打败魔法呢?我们可以让大模型来帮着优化Prompt,今天我们选择在百度千帆大模型平台对Prompt进行评估和优化。
Let's 构!
1. 在使用Prompt评估之前需要先登录百度云控制台。
2. 因为要对Prompt进行评估和优化,需要用到应用和模型,所以需要在百度云千帆大模型平台中先发布应用。
3. 在千帆大模型平台Prompt工程中点击Prompt评估页面,我们可以选择示例的例子进行操作,点击试一试旁边的“加法计算”,选择应用和模型后可以点击“开始评估”。
4. 可以看到如下图所示的评估内容,包括2个场景和2个Prompt,当然我们也可以自定义增加Prompt。除了根据场景和Prompt生成模型输出的结果,还可以得到Prompt评估得分和优化建议。
5. 我们可以直接保存现有的Prompt内容为Prompt模板。
6. 接着我们对Prompt进行优化,可以设置如下参数。
7. 在Prompt优化页面还是需要选择应用和模型,分别点击“优化”和“推理”,可以获得优化推荐的Prompt以及推理结果。
8. 既然优化后的Prompt这么好,我们就可以直接保存为模板方便下次使用。
9. 恭喜又获得新技能,让大模型帮助我们来优化Prompt,以便通过优质的Prompt让大模型输出优质的内容。
10. 本实验支持在MumuLab.cn中进行操作,完成实验并提交结果可获得实验积分、刷新排行榜、有机会兑换小礼品。
出自:https://mp.weixin.qq.com/s/EJZf6tPKor2KuUwGBxThNw