\(\bullet\)_Conversation text._ Conversation data can enhance the conversational competence of LLMs [90] and potentially improve their performance on a range of question-answering tasks [56]. Researchers can utilize subsets of public conversation corpus (_e.g.,_ PushShift.io Reddit corpus) [202, 158] or collect conversation data from online social media. Since online conversational data often involves discussions among multiple participants, an effective processing way is to transform a conversation into a tree structure, where the utterance is linked to the one it responds to. In this way, the multi-party conversation tree can be divided into multiple sub-conversations, which can be collected in the pre-training corpus. Furthermore, a potential risk is that the excessive integration of dialogue data into LLMs may result in a side effect [90]: declarative instructions and direct interrogatives are erroneously perceived as the beginning of conversations, thus leading to a decline in the efficacy of the instructions.
\(\bullet\)_대화 텍스트._ 대화 데이터는 LLMs의 대화 역량을 향상시키고 [90] 다양한 질의응답 작업에서 잠재적으로 성능을 향상시킬 수 있습니다 [56]. 연구자들은 공개 대화 코퍼스의 하위 집합(_예:_ PushShift.io Reddit 코퍼스) [202, 158]을 활용하거나 온라인 소셜 미디어에서 대화 데이터를 수집할 수 있습니다. 온라인 대화 데이터에는 종종 여러 참가자 간의 토론이 포함되므로 대화를 트리 구조로 변환하여 발화를 응답하는 발화에 연결하는 것이 효과적인 처리 방법입니다. 이러한 방식으로 다자 대화 트리는 여러 하위 대화로 나눌 수 있으며, 이 하위 대화는 사전 학습 코퍼스에 수집될 수 있습니다. 또한, 대화 데이터를 LLMs에 과도하게 통합하면 선언적 instructions와 직접적인 질문이 대화의 시작으로 잘못 인식되어 instructions의 효율성이 저하되는 부작용이 발생할 수 있습니다 [90].
\(\bullet\)_대화 텍스트._ 대화 데이터는 LLM의 대화 역량을 향상시키고 [90] 다양한 질의응답 작업에서 잠재적으로 성능을 향상시킬 수 있습니다 [56]. 연구자들은 공개 대화 코퍼스의 하위 집합(_예:_ PushShift.io Reddit 코퍼스) [202, 158]을 활용하거나 온라인 소셜 미디어에서 대화 데이터를 수집할 수 있습니다. 온라인 대화 데이터에는 종종 여러 참가자 간의 토론이 포함되므로 대화를 트리 구조로 변환하여 발화를 응답하는 발화에 연결하는 것이 효과적인 처리 방법입니다. 이러한 방식으로 다자 대화 트리는 여러 하위 대화로 나눌 수 있으며, 이 하위 대화는 사전 학습 코퍼스에 수집될 수 있습니다. 또한, 대화 데이터를 LLM에 과도하게 통합하면 선언적 지시와 직접적인 질문이 대화의 시작으로 잘못 인식되어 지시의 효율성이 저하되는 부작용이 발생할 수 있습니다 [90].