\(\bullet\)_The top-performing model varies on different human alignment tasks._ For different human alignment tasks, we can see that these models achieve inconsistent performance rankings. For example, LLaMA 2-Chat (7B) performs the best among the compared open-source models on TruthfulQA, while Vicuna (13B) performs the best on CrowS-Pairs. A possible reason is that these tasks are designed with specific purposes for evaluating different aspects of human alignment, and these models exhibit varied performance on different tasks, even for the variants of the same model (_e.g.,_ Pythia (7B) and Pythia (12B)). More experiments and analysis on human alignment evaluation are needed to reveal more detailed findings.
\(\bullet\)_상위 성능 모델은 다양한 human alignment 작업에 따라 다릅니다.\_ 다양한 human alignment 작업의 경우, 이러한 모델이 일관되지 않은 성능 순위를 달성하는 것을 볼 수 있습니다. 예를 들어, LLaMA 2-Chat(7B)는 TruthfulQA에서 비교 대상인 오픈 소스 모델 중 가장 우수한 성능을 보이는 반면, Vicuna(13B)는 CrowS-Pairs에서 가장 우수한 성능을 보입니다. 한 가지 가능한 이유는 이러한 작업이 human alignment의 다양한 측면을 평가하기 위한 특정 목적을 가지고 설계되었기 때문이며, 이러한 모델은 동일한 모델의 변형(_예:_ Pythia (7B) 및 Pythia (12B))의 경우에도 작업마다 다양한 성능을 보입니다. 보다 자세한 결과를 밝히기 위해서는 human alignment 평가에 대한 더 많은 실험과 분석이 필요합니다.
\(\bullet\)_상위 성능 모델은 다양한 인간 정렬 작업에 따라 다릅니다.\_ 다양한 인간 정렬 작업의 경우, 이러한 모델이 일관되지 않은 성능 순위를 달성하는 것을 볼 수 있습니다. 예를 들어, LLaMA 2-Chat(7B)는 진실한QA에서 비교 대상인 오픈 소스 모델 중 가장 우수한 성능을 보이는 반면, Vicuna(13B)는 CrowS-Pairs에서 가장 우수한 성능을 보입니다. 한 가지 가능한 이유는 이러한 작업이 인간 정렬의 다양한 측면을 평가하기 위한 특정 목적을 가지고 설계되었기 때문이며, 이러한 모델은 동일한 모델의 변형(_예:_ Pythia (7B) 및 Pythia (12B))의 경우에도 작업마다 다양한 성능을 보입니다. 보다 자세한 결과를 밝히기 위해서는 인간 정렬 평가에 대한 더 많은 실험과 분석이 필요합니다.