RLHF 如何定义对话偏好和好坏标注标准，并构建偏好数据集？

阐述RLHF对齐偏好定义逻辑，大模型对话优劣好坏的标注标准与偏好数据集构建逻辑。