迈向理解和防止错位泛化
Toward understanding and preventing misalignment generalization
精选理由
帮助读者理解模型偏差扩散及其可逆修复思路。
AI 摘要
我们研究了基于错误回答进行训练如何导致语言模型中更广泛的错位,并识别出驱动这种行为的一个内部特征——该特征可以通过最少量的微调被逆转。
Toward understanding and preventing misalignment generalization
帮助读者理解模型偏差扩散及其可逆修复思路。
我们研究了基于错误回答进行训练如何导致语言模型中更广泛的错位,并识别出驱动这种行为的一个内部特征——该特征可以通过最少量的微调被逆转。