**BLOOM:** In [93], Scao et al. presented BLOOM, a 176B-parameter open-access language model designed and built thanks to a collaboration of hundreds of researchers. BLOOM is a decoder-only Transformer language model trained on the ROOTS corpus, a dataset comprising hundreds of sources in 46 natural and 13 programming languages (59 in total). An overview of BLOOM architecture is shown in Fig 23.
**BLOOM:** [93]에서 Scao 등은 수백 명의 연구자들이 협력하여 설계하고 구축한 176B 파라미터 오픈 액세스 언어 모델인 BLOOM을 발표했습니다. BLOOM은 46개 자연어와 13개 프로그래밍 언어(총 59개)로 구성된 수백 개의 소스로 구성된 데이터 세트인 ROOTS 코퍼스에서 학습된 decoder-only Transformer 언어 모델입니다. BLOOM 아키텍처에 대한 개요는 그림 23에 나와 있습니다.
**BLOOM:** [93]에서 Scao 등은 수백 명의 연구자들이 협력하여 설계하고 구축한 176B 파라미터 오픈 액세스 언어 모델인 BLOOM을 발표했습니다. BLOOM은 46개 자연어와 13개 프로그래밍 언어(총 59개)로 구성된 수백 개의 소스로 구성된 데이터 세트인 ROOTS 코퍼스에서 학습된 디코더 전용 트랜스포머 언어 모델입니다. BLOOM 아키텍처에 대한 개요는 그림 23에 나와 있습니다.