Task Definition 部署的模型仍可能会产生不可预测的错误。例如,大型语言模型(LLM)臭名昭著产生幻觉 ,保持偏见、和实际衰变,所以我们应该能够调整预训练模型的特定行为。
模型编辑旨在调整初始基本模型的特定编辑描述符上的行为高效,例如(美国总统:唐纳德·特朗普->乔·拜登):
:“谁是美国总统? :“乔·拜登。” 不影响无关样本的模型行为。最终目标是创建一个经过编辑的模型 .