We then train new models (with the same architecture) to predict GCD, from AI data (generated by the above model), and compare to training with correct data - from correct computation of the GCD. When trained on small number of examples (less than \(100\) million), models learning from AI data achieve better accuracy (Table 2). We believe this is due to the fact that AI data smoothes away all the hard case, therefore presenting the model with a cleaner signal in the initial stages.
그 후, 우리는 새로운 모델들을 (동일한 아키텍처로) AI 데이터(위의 모델에 의해 생성된)로부터 GCD를 예측하도록 훈련하고, 올바른 데이터 - GCD의 정확한 계산으로부터 - 로 훈련한 것과 비교합니다. 적은 수의 예제(1억 미만)로 훈련했을 때, AI 데이터로부터 학습한 모델들이 더 나은 정확도를 달성합니다 (표 2). 우리는 이것이 AI 데이터가 모든 어려운 사례를 부드럽게 처리하여 초기 단계에서 모델에 더 깨끗한 신호를 제공하기 때문이라고 믿습니다.
그런 다음 새로운 모델(동일한 아키텍처)을 훈련하여 AI 데이터(위의 모델에서 생성된 데이터)에서 GCD를 예측하고 올바른 GCD 계산에서 생성된 올바른 데이터로 훈련하는 것과 비교합니다. 소수의 예제(1억 개 미만)로 훈련할 경우, AI 데이터를 학습한 모델이 더 높은 정확도를 달성합니다(표 2). 이는 AI 데이터가 모든 어려운 경우를 평활화하여 초기 단계에서 모델에 더 깨끗한 신호를 제공하기 때문이라고 생각합니다.