【Bug已解决】Feature Request: Allow passing dataset-provided sample weights to DPOTrainer 解决方案
【Bug已解决】Feature Request: Allow passing dataset-provided sample weights to DPOTrainer 解决方案
一、现象长什么样
做 DPO 偏好对齐时,我们的数据集里每条样本带了一个质量权重字段(比如 sample_weight):高置信度的偏好对…
2026/7/22 12:43:35