**500K length book summarization (BookSum).** We further scaled our approach by continuously pre-training a 8B LLM model with 8K input length for 30K steps. We then fine-tuned on a book summarization task, BookSum (Kryscinski et al., 2021) where the goal is to generate a summary of an entire book text.
**500K 길이의 책 요약(BookSum).** 8K 입력 길이에 대해 30K 단계 동안 8B LLM 모델을 지속적으로 pre-training하여 접근 방식을 확장했습니다. 그런 다음 전체 책 텍스트의 요약을 생성하는 것이 목표인 책 요약 작업인 BookSum(Kryscinski et al., 2021)에 대해 Fine-tuning했습니다.
**500K 길이의 책 요약(BookSum).** 8K 입력 길이에 대해 30K 단계 동안 8B LLM 모델을 지속적으로 사전 학습시켜 접근 방식을 확장했습니다. 그런 다음 전체 책 텍스트의 요약을 생성하는 것이 목표인 책 요약 작업인 BookSum(Kryscinski et al., 2021)에 대해 미세 조정했습니다.