2021) involves transferring data from a pre-trained, larger model to a smaller one, often using methods such as embedded matching. Research has even been conducted on data distillation using LMs as the technology has evolved.
2021)은 사전 학습된 더 큰 모델에서 더 작은 모델로 데이터를 전송하는 것으로, 종종 embedded matching과 같은 방법을 사용합니다. 기술이 발전함에 따라 LMs을 사용한 데이터 증류에 대한 연구도 진행되었습니다.
2021)은 사전 학습된 더 큰 모델에서 더 작은 모델로 데이터를 전송하는 것으로, 종종 임베디드 매칭과 같은 방법을 사용합니다. 기술이 발전함에 따라 LM을 사용한 데이터 증류에 대한 연구도 진행되었습니다.