We show the details of pairwise comparison on Evol-Instruct benchmark with LLaMA-based models, as a demonstration of how CRR faithfully reflects the capability of the target LLMs trained by different methods. In Table 5, we observe that number of ties dominates the results and the number of wins are scarce. We attribute it to the fact that the target model is essentially distilling knowledge from the strong model. As a result, most of the time, the instruction-tuned target model is only able to respond as good as the strong model, through the lens of the LLM-based evaluator.
다양한 방법으로 학습된 대상 LLM의 기능을 CRR이 충실하게 반영하는지 보여주기 위해 LLaMA 기반 모델로 Evol-Instruct 벤치마크에서 쌍별 비교의 세부 사항을 보여줍니다. 표 5에서 동점 수가 결과를 지배하고 승리 횟수가 드물다는 것을 알 수 있습니다. 이는 대상 모델이 기본적으로 강력한 모델에서 지식을 증류하는 것이기 때문이라고 생각합니다. 결과적으로 대부분의 경우, Instruction-tuned 대상 모델은 LLM 기반 평가자의 렌즈를 통해 강력한 모델만큼 좋은 응답을 할 수 있을 뿐입니다.
다양한 방법으로 학습된 대상 LLM의 기능을 CRR이 충실하게 반영하는지 보여주기 위해 LLaMA 기반 모델로 Evol-Instruct 벤치마크에서 쌍별 비교의 세부 사항을 보여줍니다. 표 5에서 동점 수가 결과를 지배하고 승리 횟수가 드물다는 것을 알 수 있습니다. 이는 대상 모델이 기본적으로 강력한 모델에서 지식을 증류하는 것이기 때문이라고 생각합니다. 결과적으로 대부분의 경우, 지시를 받은 대상 모델은 LLM 기반 평가자의 렌즈를 통해 강력한 모델만큼 좋은 응답을 할 수 있을 뿐입니다.