计划有变，改为首都机场出发，杭州中转

语音学实验会用到的一些统计学方法，以及一个「大一统」视角

DPO 通过数学推导证明，最优策略 π 与参考模型 π(ref) 之间的对数比，与奖励 r(x,y) 存在直接的解析关系

为了把人类反馈作为奖励，我们借鉴经济学的概念，建模人类偏好，在人类偏好数据集上，使用神经网络建模回报函数，最终形成了用于RLHF的PPO框架。

林小英《现代中国教育传统及其变迁》课程论文

又是一年年关岁末。