PATH 04

偏好对齐（DPO / RLHF）

示范回答只能告诉模型“应该做什么”；偏好数据进一步告诉它，在多个可行答案中，什么样的回答更好。