In addition to the above library resources, existing deep learning frameworks (_e.g._, PyTorch [197], TensorFlow [198], MXNet [199], PaddlePaddle [200], MindSpore [136] and OneFlow [201]) have also provided the support for parallel algorithms, which are commonly used for training large-scale models.
위의 라이브러리 자원 외에도, 기존의 딥러닝 프레임워크들(예: PyTorch [197], TensorFlow [198], MXNet [199], PaddlePaddle [200], MindSpore [136], OneFlow [201])은 대규모 모델 훈련에 일반적으로 사용되는 병렬 알고리즘에 대한 지원도 제공합니다.
위의 라이브러리 리소스 외에도 기존 딥러닝 프레임워크(예: PyTorch [197], TensorFlow [198], MXNet [199], PaddlePaddle [200], MindSpore [136] 및 OneFlow [201])도 대규모 모델 훈련에 일반적으로 사용되는 병렬 알고리즘에 대한 지원을 제공했습니다.