Most data processing took place in large CPU clusters, with 100-250 AWS c5.18xlarge instances; each instance has 72 vCPUs and 144 GiB of memory. We usually run with 10,000-20,000 vCPUs in the cluster, enabling rapid parallel processing.
대부분의 데이터 처리는 100-250개의 AWS c5.18xlarge 인스턴스를 사용하는 대규모 CPU 클러스터에서 이루어졌습니다. 각 인스턴스는 72개의 vCPU와 144 GiB의 메모리를 가지고 있습니다. 우리는 보통 클러스터에서 10,000-20,000개의 vCPU를 사용하여 빠른 병렬 처리를 가능하게 합니다.
대부분의 데이터 처리가 100~250개의 AWS c5.18xlarge 인스턴스로 구성된 대규모 CPU 클러스터에서 이루어졌으며, 각 인스턴스에는 72개의 vCPU와 144GiB의 메모리가 있습니다. 일반적으로 클러스터에서 10,000~20,000개의 vCPU로 실행하여 빠른 병렬 처리가 가능합니다.