with less data. Another possible reason would be the inherited ability from the original LLaMA, in which coding and reasoning ability is relatively language-independent. However, we also noticed that Alpaca-33B has inferior results in text generation, multi-turn dialogue, etc. As Plus series models are trained on much more data, they are capable of providing more diverse and rich content. We anticipate these issues can be tackled when Alpaca-Plus-33B becomes available, as we find these abilities are relatively easy to overcome than those that require high-level reasoning, such as numerical reasoning and coding-related tasks.
데이터가 적기 때문일 수도 있습니다. 또 다른 가능한 이유는 코딩 및 추론 능력이 상대적으로 언어에 독립적인 원래 LLaMA에서 물려받은 능력 때문일 수 있습니다. 하지만 Alpaca-33B는 텍스트 생성, multi-turn dialogue 등에서도 열등한 결과를 보이는 것을 발견했습니다. Plus 시리즈 모델은 훨씬 더 많은 데이터로 학습되었기 때문에 더 다양하고 풍부한 콘텐츠를 제공할 수 있습니다. 수치 추론 및 코딩 관련 작업과 같이 높은 수준의 추론이 필요한 능력보다 상대적으로 극복하기 쉬운 능력이기 때문에 Alpaca-Plus-33B를 사용할 수 있게 되면 이러한 문제를 해결할 수 있을 것으로 기대합니다.
데이터가 적기 때문일 수도 있습니다. 또 다른 가능한 이유는 코딩 및 추론 능력이 상대적으로 언어에 독립적인 원래 LLaMA에서 물려받은 능력 때문일 수 있습니다. 하지만 알파카-33B는 텍스트 생성, 멀티 턴 대화 등에서도 열등한 결과를 보이는 것을 발견했습니다. Plus 시리즈 모델은 훨씬 더 많은 데이터로 학습되었기 때문에 더 다양하고 풍부한 콘텐츠를 제공할 수 있습니다. 수치 추론 및 코딩 관련 작업과 같이 높은 수준의 추론이 필요한 능력보다 상대적으로 극복하기 쉬운 능력이기 때문에 알파카-플러스-33B를 사용할 수 있게 되면 이러한 문제를 해결할 수 있을 것으로 기대합니다.