We hope that openly releasing our models can reduce future emissions by allowing others to avoid the need to pretrain models from scratch, and give insights into the true cost of developing state of the art models. We also highlight that our estimates are lower bounds, because they do not include other critical pieces of development such as debugging, hyperparameter tuning, and downtime.
모델을 공개적으로 공개함으로써 다른 사람들이 모델을 처음부터 pretrain할 필요가 없어져 향후 배출량을 줄이고 최첨단 모델 개발에 드는 실제 비용에 대한 인사이트를 제공할 수 있기를 바랍니다. 또한 디버깅, hyperparameter tuning, downtime과 같은 다른 중요한 개발 단계가 포함되어 있지 않기 때문에 우리의 추정치는 하한선이라는 점을 강조합니다.
모델을 공개적으로 공개함으로써 다른 사람들이 모델을 처음부터 사전 학습할 필요가 없어져 향후 배출량을 줄이고 최첨단 모델 개발에 드는 실제 비용에 대한 인사이트를 제공할 수 있기를 바랍니다. 또한 디버깅, 하이퍼파라미터 튜닝, 다운타임과 같은 다른 중요한 개발 단계가 포함되어 있지 않기 때문에 우리의 추정치는 하한선이라는 점을 강조합니다.