prompt-optimizer icon indicating copy to clipboard operation
prompt-optimizer copied to clipboard

如果能整合spo进行提示词优化就更好了

Open mouse0232 opened this issue 8 months ago • 4 comments

关于spo提示词优化参考文章:https://mp.weixin.qq.com/s/EjpsRtYVD_Ax7eCljGVMog

mouse0232 avatar Apr 03 '25 02:04 mouse0232

它这个设计很有意思,通过 优化器、执行器、评估器3个ai角色来自动完成多轮迭代,得到最终优化后的提示词。 其中 优化器对应这个项目中的 ”优化/迭代” 操作,执行器对应 ”测试” 操作,评估器则对应 ”人对测试结果的反馈并给出迭代需求” 操作。 缺点是依赖 需求说明(requirements) 和 测试问答数据(qa),不太适合纯新手。没有测试问答数据的话就失去了自我优化的基础,给的测试数据不合适的话也容易过拟合。不过对于模仿风格(如文章中的小红书示例)效果很好。 同时多轮迭代+自动评估的思路也很不错,毕竟就算是现有的“继续优化”功能,只要点上10次,也能得到较好的效果。 总的来说是个值得借鉴的思路,感谢分享!

linshenkx avatar Apr 07 '25 09:04 linshenkx

所以,大大会在后续的迭代中增加 spo 优化功能吗?

YIYABOB-DOT avatar Jun 16 '25 07:06 YIYABOB-DOT

所以,大大会在后续的迭代中增加 spo 优化功能吗?

会的,以结果导向的提示词优化虽然可能有过拟合的问题,但在agent工程中很有价值,经常遇到那种需要输出特定内容的场景。现在还在做一些基础功能增强,然后就会增加相关的高级优化功能

linshenkx avatar Jun 16 '25 13:06 linshenkx

大佬有计划实现spo能力吗

YoungofNUAA avatar Sep 15 '25 08:09 YoungofNUAA