The results are shown in Figure 3. When setting the linear coefficients of be [1, -1], we see that Yi 34B and LLaMA-2 70B performs the best in-terms of answer exact match. If we increase the number of the linear coefficients to be [1, 1, 1, 1, 1], we observe the emergent behavior that only large models (LLaMA-2 70B and Mixtral) can achieve good scores on exact match, although the differences to target is more continuous. These observations give side evidence for Yi-34B's performance on in-context learning and indicates that further scaling may allow the model to infer more complicated functions by in-context learning.
그 결과는 그림 3과 같습니다. 선형 계수를 [1, -1]로 설정할 때, Yi 34B와 LLaMA-2 70B가 정답 정확도 측면에서 가장 우수한 성능을 보이는 것을 알 수 있습니다. 선형 계수의 수를 [1, 1, 1, 1, 1]로 늘리면 대상과의 차이가 더 지속적이지만 대규모 모델(LLaMA-2 70B 및 Mixtral)만이 정확도에서 좋은 점수를 달성할 수 있는 새로운 동작이 나타납니다. 이러한 관찰은 In-Context Learning에 대한 Yi-34B의 성능에 대한 부수적인 증거를 제공하며, 추가 확장을 통해 모델이 In-Context Learning을 통해 더 복잡한 함수를 추론할 수 있음을 나타냅니다.
그 결과는 그림 3과 같습니다. 선형 계수를 [1, -1]로 설정할 때, Yi 34B와 LLaMA-2 70B가 정답 정확도 측면에서 가장 우수한 성능을 보이는 것을 알 수 있습니다. 선형 계수의 수를 [1, 1, 1, 1, 1]로 늘리면 대상과의 차이가 더 지속적이지만 대규모 모델(LLaMA-2 70B 및 Mixtral)만이 정확도에서 좋은 점수를 달성할 수 있는 새로운 동작이 나타납니다. 이러한 관찰은 인컨텍스트 학습에 대한 Yi-34B의 성능에 대한 부수적인 증거를 제공하며, 추가 확장을 통해 모델이 인컨텍스트 학습을 통해 더 복잡한 함수를 추론할 수 있음을 나타냅니다.