**EM** provided input on early discussions on learning autoregressive reward functions; wrote the first implementation of DPO and ran the first DPO experiments; trained the large-scale (summarization and dialogue) DPO models used in paper experiments; conducted initial GPT-4 win rate evaluations and set up related infrastructure; recruited participants for, conducted, and analyzed results from the human study; wrote the abstract, introduction, related work, discussion, and most of experiments; and assisted with editing the rest of the paper.
EM은 자율회귀 보상 함수 학습에 대한 초기 논의에 입력을 제공했으며, DPO의 첫 번째 구현을 작성하고 첫 번째 DPO 실험을 수행했습니다. 논문 실험에 사용된 대규모 DPO 모델(요약 및 대화)을 훈련했으며, 초기 GPT-4 승률 평가를 수행하고 관련 인프라를 구축했습니다. 또한, 인간 연구를 위한 참가자를 모집하고 연구를 수행하며 결과를 분석했습니다. 초록, 서론, 관련 연구, 논의 및 대부분의 실험 부분을 작성했으며, 나머지 논문의 편집을 도왔습니다.
**EM**은 학습 자동 회귀 보상 함수에 대한 초기 논의에 대한 의견을 제공하고, DPO의 첫 번째 구현을 작성하고 첫 번째 DPO 실험을 수행했으며, 논문 실험에 사용된 대규모(요약 및 대화) DPO 모델을 훈련했으며, 초기 GPT-4 승률 평가를 수행하고 관련 인프라를 구축했으며, 인간 연구에 대한 참가자를 모집하고 수행 및 결과 분석을 수행했으며, 초록, 서론, 관련 연구, 토론 및 대부분의 실험을 작성했으며 나머지 논문 편집을 지원했습니다.