**Text Generation.** Text generation tasks, _e.g._, machine translation [624] and automatic summarization [548], are long-standing NLP tasks that have been widely studied, and there have been a number of deployed products and systems based on fine-tuned small models [764, 311]. Since the pre-training of LLMs is established on text prediction, they exhibit strong language generation abilities as commercial products [627] and humans [628], with the help of proper prompts [765, 766]. Additionally, LLMs are flexible to effectively handle special requirement in real-world application scenarios, _e.g._, document-level translation [767], and also enable natural language interaction with users to further improve the generation quality [768]. Despite the above success, recent work also reveals that LLMs are hard to well address the generation tasks about low-resource languages and domains, _e.g._, Marathi-to-English translation [769], due to their unbalanced training data across different languages.
**텍스트 생성**. 텍스트 생성 작업(_예: 기계 번역[624] 및 자동 요약[548])은 오랫동안 연구되어 온 NLP 작업으로, Fine-tuning된 소규모 모델[764, 311]을 기반으로 한 여러 제품과 시스템이 배포되었습니다. LLM의 사전 학습은 텍스트 예측을 기반으로 하기 때문에 적절한 프롬프트[765, 766]의 도움을 받아 상용 제품[627] 및 인간[628]과 같은 강력한 언어 생성 능력을 발휘합니다. 또한 LLM은 문서 수준 번역[767]과 같은 실제 애플리케이션 시나리오에서 특별한 요구 사항을 효과적으로 처리할 수 있으며, 사용자와 자연스러운 언어로 상호 작용하여 생성 품질을 더욱 향상시킬 수 있습니다[768]. 위와 같은 성공에도 불구하고 최근 연구에 따르면 LLM은 다양한 언어에 걸쳐 불균형한 학습 데이터로 인해 마라티어-영어 번역[769]과 같이 저자원 언어 및 도메인에 대한 생성 작업을 잘 처리하기 어렵다는 사실이 밝혀졌습니다.
**텍스트 생성**. 텍스트 생성 작업(_예: 기계 번역[624] 및 자동 요약[548])은 오랫동안 연구되어 온 NLP 작업으로, 미세 조정된 소규모 모델[764, 311]을 기반으로 한 여러 제품과 시스템이 배포되었습니다. LLM의 사전 학습은 텍스트 예측을 기반으로 하기 때문에 적절한 프롬프트[765, 766]의 도움을 받아 상용 제품[627] 및 인간[628]과 같은 강력한 언어 생성 능력을 발휘합니다. 또한 LLM은 문서 수준 번역[767]과 같은 실제 애플리케이션 시나리오에서 특별한 요구 사항을 효과적으로 처리할 수 있으며, 사용자와 자연스러운 언어로 상호 작용하여 생성 품질을 더욱 향상시킬 수 있습니다[768]. 위와 같은 성공에도 불구하고 최근 연구에 따르면 LLM은 다양한 언어에 걸쳐 불균형한 학습 데이터로 인해 마라티어-영어 번역[769]과 같이 저자원 언어 및 도메인에 대한 생성 작업을 잘 처리하기 어렵다는 사실이 밝혀졌습니다.