We start the evolution from a given initial instruction dataset \(D^{(0)}=\left(I_{k}^{(0)},R_{k}^{(0)}\right)_{1\leq k\leq N}\), where \(I_{k}^{(0)}\) is the \(k\)-th instruction in \(D^{(0)}\), \(R_{k}^{(0)}\) is the corresponding response for the \(k\)-th instruction, and \(N\) is the number of samples in \(D^{(0)}\). In each evolution, we upgrade all the \(I^{(t)}\) in \(D^{(t)}\) to \(I^{(t+1)}\) by applying a LLM instruction evolution prompt, and then use the LLM to generate corresponding responses \(R^{t+1}\) for the newly evolved \(I^{t+1}\). Thus, we obtain an evolved instruction dataset \(D^{t+1}\). By iteratively performing \(M\) evolutions, we can sequentially obtain \(M\) evolution datasets \([D^{(1)}\cdots D^{(M)}]\). Our work focuses on open-domain instruction data, where instructions have varying inputs and tasks without a clear distinction between the instruction part and the input.
주어진 초기 Instruction 데이터 집합 \(D^{(0)}=\left(I_{k}^{(0)},R_{k}^{(0)}\right)_{1\leq k\leq N}\), 여기서 \(I_{k}^{(0)}\)는 \(D^{(0)}에서 \(k\)-번째 Instruction이고, \(R_{k}^{(0)}\)는 \(k\)-번째 Instruction에 해당하는 응답이며, \(N\)은 \(D^{(0)}\)의 샘플 수입니다. 각 진화에서는 LLM Instruction 진화 프롬프트를 적용하여 \(D^{(t)}\)의 모든 \(I^{(t)}\)를 \(I^{(t+1)}\)로 업그레이드한 다음, LLM을 사용하여 새로 진화된 \(I^{(t+1)}\)에 해당하는 응답 \(R^{(t+1)}\)을 생성합니다. 따라서 진화된 Instruction 데이터 세트 \(D^{(t+1)}\)를 얻습니다. \(M\)의 진화를 반복적으로 수행함으로써 \(M\)의 진화 데이터 세트 \([D^{(1)}\cdots D^{(M)}]\)를 순차적으로 얻을 수 있습니다. 이 작업은 Instruction 부분과 입력이 명확하게 구분되지 않고 입력과 작업이 다양한 공개 도메인 Instruction 데이터에 중점을 둡니다.
주어진 초기 명령어 데이터 집합 \(D^{(0)}=\left(I_{k}^{(0)},R_{k}^{(0)}\right)_{1\leq k\leq N}\), 여기서 \(I_{k}^{(0)}\)는 \(D^{(0)}\)에서 \(k\)-번째 명령어이고, \(R_{k}^{(0)}\)는 \(k\)-번째 명령어에 해당하는 응답이며, \(N\)은 \(D^{(0)}\)의 샘플 수입니다. 각 진화에서는 LLM 명령어 진화 프롬프트를 적용하여 \(D^{(t)}\)의 모든 \(I^{(t)}\)를 \(I^{(t+1)}\로 업그레이드한 다음, LLM을 사용하여 새로 진화된 \(I^{t+1}\)에 해당하는 응답 \(R^{t+1}\)을 생성합니다. 따라서 진화된 명령어 데이터 세트 \(D^{t+1}\)를 얻습니다. M\)의 진화를 반복적으로 수행함으로써 \(M\)의 진화 데이터 세트 \([D^{(1)}\cdots D^{(M)}]\)를 순차적으로 얻을 수 있습니다. 이 작업은 명령어 부분과 입력이 명확하게 구분되지 않고 입력과 작업이 다양한 공개 도메인 명령어 데이터에 중점을 둡니다.