Most merged models in the community optimize for a narrow set of tasks defined in The Open LLM Leaderboard [20]. Our motivation is for evolutionary search to discover novel ways to merge different models from vastly different domains (e.g., non-English language and Math, or non-English language and Vision) which might be difficult for human experts to discover effective merging solutions themselves. Furthermore, effectively merging models from very different domains can lead to models of wider real-world applicability and enable us to develop models beyond the large population of models that are optimized for the narrow range of tasks defined by a leaderboard.
커뮤니티의 대부분의 병합 모델은 The Open LLM Leaderboard[20]에 정의된 좁은 작업 집합을 최적화합니다. 우리의 동기는 evolutionary search를 통해 인간 전문가가 효과적인 병합 솔루션을 스스로 발견하기 어려울 수 있는 매우 다른 도메인(예: 비영어 언어와 수학 또는 비영어 언어와 Vision)의 서로 다른 모델을 병합하는 새로운 방법을 발견하는 것입니다. 또한 서로 다른 도메인의 모델을 효과적으로 병합하면 실제 적용 가능성이 넓은 모델을 만들 수 있으며, 리더보드에서 정의된 좁은 범위의 작업에 최적화된 대규모 모델 집단을 넘어 모델을 개발할 수 있습니다.
커뮤니티의 대부분의 병합 모델은 Open LLM 리더보드[20]에 정의된 좁은 작업 집합을 최적화합니다. 우리의 동기는 진화적 검색을 통해 인간 전문가가 효과적인 병합 솔루션을 스스로 발견하기 어려울 수 있는 매우 다른 도메인(예: 비영어 언어와 수학 또는 비영어 언어와 비전)의 서로 다른 모델을 병합하는 새로운 방법을 발견하는 것입니다. 또한 서로 다른 도메인의 모델을 효과적으로 병합하면 실제 적용 가능성이 넓은 모델을 만들 수 있으며, 리더보드에서 정의된 좁은 범위의 작업에 최적화된 대규모 모델 집단을 넘어 모델을 개발할 수 있습니다.