Table 4 compares our model against the encoder-decoder models that were built particularly for the summarization task (Lewis et al., 2019; Xiao et al., 2021) and their retrieval-based long-context extension (Bertsch et al., 2024). Our model outperforms the previous best results and achieves a new SOTA on BookSum by processing the entire text from book. We have also plotted the overall Rouge score on validation split of BookSum data in Figure 4. There is a clear trend showing that with more text provided as input from books, Our Infini-Transformers improves its summarization performance metric.
표 4는 요약 작업(Lewis et al., 2019; Xiao et al., 2021)을 위해 특별히 구축된 Encoder-Decoder 모델과 이를 기반으로 한 retrieval-based long-context extension(Bertsch et al., 2024)과 비교한 우리 모델을 보여줍니다. 우리 모델은 이전의 최고 결과를 능가하며 책의 전체 텍스트를 처리하여 BookSum에서 새로운 SOTA를 달성했습니다. 또한 그림 4에 BookSum 데이터의 유효성 검사 분할에 대한 전체 Rouge 점수를 플롯했습니다. 책에서 더 많은 텍스트가 입력으로 제공될수록 Our Infini-Transformers가 요약 성능 지표를 향상시키는 분명한 추세가 나타납니다.
표 4는 요약 작업(Lewis et al., 2019; Xiao et al., 2021)을 위해 특별히 구축된 인코더-디코더 모델과 이를 기반으로 한 검색 기반 장문 텍스트 확장(Bertsch et al., 2024)과 비교한 우리 모델을 보여줍니다. 우리 모델은 이전의 최고 결과를 능가하며 책의 전체 텍스트를 처리하여 BookSum에서 새로운 SOTA를 달성했습니다. 또한 그림 4에 BookSum 데이터의 유효성 검사 분할에 대한 전체 Rouge 점수를 플롯했습니다. 책에서 더 많은 텍스트가 입력으로 제공될수록 Our Infini-Transformers가 요약 성능 지표를 향상시키는 분명한 추세가 나타납니다.