Bai 等,2022-12,Constitutional AI: Harmlessness from AI Feedback(Anthropic)。SL 自我批评 + RLAIF。
原文:arXiv:2212.08073。
按原文结构转述 Bai 等 2022:原则监督、自我修订与 RLAIF。
把无害性写成可修订的原则,用模型监督模型。对齐旁支,不是交错行动那种控制协议。