只需几个演示就能对齐大模型，杨笛一团队提出的DITTO竟如此高效
【6月更文挑战第22天】斯坦福团队推出DITTO，一种只需少量演示即可高效对齐大型语言模型的新技术。DITTO借助用户演示生成在线比较数据，实现模型对齐，无需大规模数据集。在用户研究中，DITTO表现优于传统方法，平均胜出19%，开创了LLMs对齐的简洁途径，适用于个性化助手和聊天机器人等场景。然而，它可能不适用于需要大量数据的任务，训练速度较慢，且可能无法完全匹配用户意图。[论文链接](https://arxiv.org/pdf/2406.00888)
