DPO数据格式问题，对于同一个instruction有多个chosen和rejected怎么构造数据？

DPO数据格式问题，对于同一个instruction有多个chosen和rejected怎么构造数据？ #1945