In the clinical notes Understanding task, Yang et al. [49] exploits the linear computational complexity of Mamba to model very long sequences of clinical notes, with sequence lengths of up to 16k. The authors use the MIMIC-III dataset to pre-train the Mamba model, which is then tested on a cohort selection task and an ICD coding task, and demonstrates superior performance in modeling clinical language, especially at longer text lengths, when compared to both the Mamba and the clinical Llama models. Compared to Mamba and clinical Llama models, it shows superior performance in modeling clinical language, especially at longer text lengths. In the translation task, [50] formulates the problem of generating dance choreography as a translation task and proposes the MDLT which utilizes existing datasets to learn how to translate audio sequences into corresponding dance poses.
임상 노트 Understanding 과제에서 Yang 등[49]은 최대 16k의 시퀀스 길이로 매우 긴 임상 노트 시퀀스를 모델링하기 위해 Mamba의 선형 계산 복잡성을 활용합니다. 저자는 MIMIC-III 데이터 세트를 사용하여 Mamba 모델을 사전 학습한 다음 코호트 선택 작업과 ICD 코딩 작업에서 테스트하여 Mamba 및 임상용 Llama 모델과 비교했을 때 특히 긴 텍스트 길이에서 임상 언어 모델링에 우수한 성능을 보여줍니다. Mamba 및 임상용 Llama 모델과 비교하여 특히 긴 텍스트 길이에서 임상 언어 모델링에 우수한 성능을 보여줍니다. 번역 작업에서 [50]은 춤 안무 생성 문제를 번역 작업으로 공식화하고 기존 데이터 세트를 활용하여 오디오 시퀀스를 해당 춤 동작으로 번역하는 방법을 학습하는 MDLT를 제안합니다.
임상 노트 이해 과제에서 Yang 등[49]은 최대 16k의 시퀀스 길이로 매우 긴 임상 노트 시퀀스를 모델링하기 위해 맘바의 선형 계산 복잡성을 활용합니다. 저자는 MIMIC-III 데이터 세트를 사용하여 맘바 모델을 사전 학습한 다음 코호트 선택 작업과 ICD 코딩 작업에서 테스트하여 맘바 및 임상용 라마 모델과 비교했을 때 특히 긴 텍스트 길이에서 임상 언어 모델링에 우수한 성능을 보여줍니다. Mamba 및 임상용 라마 모델과 비교하여 특히 긴 텍스트 길이에서 임상 언어 모델링에 우수한 성능을 보여줍니다. 번역 작업에서 [50]은 춤 안무 생성 문제를 번역 작업으로 공식화하고 기존 데이터 세트를 활용하여 오디오 시퀀스를 해당 춤 동작으로 번역하는 방법을 학습하는 MDLT를 제안합니다.