prompt-optimizer
prompt-optimizer copied to clipboard
如果能整合spo进行提示词优化就更好了
关于spo提示词优化参考文章:https://mp.weixin.qq.com/s/EjpsRtYVD_Ax7eCljGVMog
它这个设计很有意思,通过 优化器、执行器、评估器3个ai角色来自动完成多轮迭代,得到最终优化后的提示词。 其中 优化器对应这个项目中的 ”优化/迭代” 操作,执行器对应 ”测试” 操作,评估器则对应 ”人对测试结果的反馈并给出迭代需求” 操作。 缺点是依赖 需求说明(requirements) 和 测试问答数据(qa),不太适合纯新手。没有测试问答数据的话就失去了自我优化的基础,给的测试数据不合适的话也容易过拟合。不过对于模仿风格(如文章中的小红书示例)效果很好。 同时多轮迭代+自动评估的思路也很不错,毕竟就算是现有的“继续优化”功能,只要点上10次,也能得到较好的效果。 总的来说是个值得借鉴的思路,感谢分享!
所以,大大会在后续的迭代中增加 spo 优化功能吗?
所以,大大会在后续的迭代中增加 spo 优化功能吗?
会的,以结果导向的提示词优化虽然可能有过拟合的问题,但在agent工程中很有价值,经常遇到那种需要输出特定内容的场景。现在还在做一些基础功能增强,然后就会增加相关的高级优化功能
大佬有计划实现spo能力吗