\(\bullet\)_Formatting design._ As an important factor, the design of natural language format also highly impacts the generalization performance of LLMs [88]. Typically, we can add task descriptions and optional demonstrations to the input-output pairs of existing datasets, where the task description is the most key part for LLMs to understand the task [88]. Further, it can lead to substantial improvements by using an appropriate number of exemplars as demonstrations [69], which also alleviates the model sensitivity to instruction engineering [67, 69]. However, incorporating other components (_e.g.,_ things to avoid, reasons, and suggestions) into instructions may have a negligible or even adverse effect on the performance of LLMs [88, 166]. Recently, to elicit the step-by-step reasoning ability of LLMs, some work [69] proposes to include chain-of-thought (CoT) examples for some reasoning datasets, such as arithmetic reasoning. It has been shown that fine-tuning LLMs with both CoT and non-CoT examples can lead to a good performance across various reasoning tasks, including those that require multi-hop reasoning ability (_e.g.,_ commonsense question answering and arithmetic reasoning) as well as those without the need for such a reasoning way (_e.g.,_ sentiment analysis and extractive question answering) [69, 95].
\(\bullet\)_포맷 디자인._ 자연어 형식의 디자인도 LLM의 일반화 성능에 큰 영향을 미치는 중요한 요소입니다[88]. 일반적으로 기존 데이터 세트의 입력-출력 쌍에 작업 설명과 선택적 데모를 추가할 수 있으며, 여기서 작업 설명은 LLM이 작업을 이해하는 데 가장 중요한 부분입니다[88]. 또한 적절한 수의 예시를 데모로 사용하면 상당한 개선 효과를 얻을 수 있으며[69], 이는 모델이 Instruction 엔지니어링에 대한 민감도를 완화하는 데에도 도움이 됩니다[67, 69]. 그러나 Instruction에 다른 구성 요소(_예:_ 피해야 할 사항, 이유 및 제안)를 포함하면 LLM의 성능에 미미하거나 심지어 부정적인 영향을 미칠 수 있습니다[88, 166]. 최근에는 LLM의 단계별 추론 능력을 이끌어내기 위해 산술 추론과 같은 일부 추론 데이터 세트에 대해 Chain-of-Thought (CoT) 예제를 포함하도록 제안하는 작업[69]이 제안되었습니다. CoT와 비 CoT 예제를 모두 사용하여 LLM을 Fine-tuning하면 다중 홉 추론 능력이 필요한 작업(예: 상식 질문 답변 및 산술 추론)과 그러한 추론 방식이 필요하지 않은 작업(예: 감정 분석 및 추출형 질문 답변)을 포함한 다양한 추론 작업에서 좋은 성능을 발휘할 수 있음이 입증되었습니다[69, 95].
\(\bullet\)_포맷 디자인._ 자연어 형식의 디자인도 LLM의 일반화 성능에 큰 영향을 미치는 중요한 요소입니다[88]. 일반적으로 기존 데이터 세트의 입력-출력 쌍에 작업 설명과 선택적 데모를 추가할 수 있으며, 여기서 작업 설명은 LLM이 작업을 이해하는 데 가장 중요한 부분입니다[88]. 또한 적절한 수의 예시를 데모로 사용하면 상당한 개선 효과를 얻을 수 있으며[69], 이는 모델이 지시 엔지니어링에 대한 민감도를 완화하는 데에도 도움이 됩니다[67, 69]. 그러나 지침에 다른 구성 요소(_예:_ 피해야 할 사항, 이유 및 제안)를 포함하면 LLM의 성능에 미미하거나 심지어 부정적인 영향을 미칠 수 있습니다[88, 166]. 최근에는 LLM의 단계별 추론 능력을 이끌어내기 위해 산술 추론과 같은 일부 추론 데이터 세트에 대해 생각의 사슬(CoT) 예제를 포함하도록 제안하는 작업[69]이 제안되었습니다. CoT와 비 CoT 예제를 모두 사용하여 LLM을 미세 조정하면 다중 홉 추론 능력이 필요한 작업(예: 상식 질문 답변 및 산술 추론)과 그러한 추론 방식이 필요하지 않은 작업(예: 감정 분석 및 추출형 질문 답변)을 포함한 다양한 추론 작업에서 좋은 성능을 발휘할 수 있음이 입증되었습니다[69, 95].