RQ6: Is there data leakage from the rephrase model to the trained model?We investigate whether our synthetic data maintains similar semantic meaning while being stylistically different from the original C4 data and matching the style of different PILE domains. We start by comparing pairs of examples of synthetic and real data to confirm the performance gain is not attributed to knowledge leakage from the rephrase models. We take a subset of the first 1000 samples from each of the datasets.
RQ6: 재구성 모델에서 학습된 모델로 데이터가 유출되나요? 우리는 합성 데이터가 원본 C4 데이터와 문체적으로 다르면서도 다른 PILE 도메인의 스타일과 일치하는 동안 유사한 의미론적 의미를 유지하는지 조사합니다. 먼저 합성 데이터와 실제 데이터의 예시 쌍을 비교하여 성능 향상이 rephrase 모델의 지식 유출에 기인하지 않은지 확인합니다. 각 데이터 세트에서 처음 1000개의 샘플 하위 집합을 가져옵니다.
RQ6: 재구성 모델에서 학습된 모델로 데이터가 유출되나요?합성 데이터가 원본 C4 데이터와 문체적으로 다르면서도 다른 PILE 도메인의 스타일과 일치하는 동안 유사한 의미론적 의미를 유지하는지 조사합니다. 먼저 합성 데이터와 실제 데이터의 예시 쌍을 비교하여 성능 향상이 재구성 모델의 지식 유출에 기인하지 않은지 확인합니다. 각 데이터 세트에서 처음 1000개의 샘플 하위 집합을 가져옵니다.