Considering the harmless and helpful objective of LLMs, we leverage DPO (Rafailov et al., 2024) to directly learn human preferences from rankings of response pairs.
LLMs의 무해하고 유용한 목표를 고려하여, 우리는 응답 쌍의 순위에서 인간의 선호도를 직접 학습하기 위해 DPO (Rafailov et al., 2024)를 활용합니다.
무해하고 유용한 LLM의 목적을 고려하여, 응답 쌍의 순위에서 인간의 선호도를 직접 학습하기 위해 DPO(Rafailov et al., 2024)를 활용한다.