While all of those models are very competitive in terms of performance in leaderboards and efficiency, they also address an important challenge in more traditional attention-based architectures: _the lack of support for larger context windows_.
이 모델들은 모두 리더보드 성능과 효율성 면에서 매우 경쟁력이 있지만, 더 전통적인 주의 기반 아키텍처에서 중요한 과제인 _더 큰 컨텍스트 윈도우에 대한 지원 부족_ 문제도 해결합니다.
이러한 모든 모델은 리더보드와 효율성 측면에서 성능 면에서 매우 경쟁력이 있지만, 더 전통적인 주의력 기반 아키텍처에서 중요한 과제인 _더 큰 컨텍스트 창을 지원하지 못한다_는 문제도 해결합니다.