We use the same metric as the original LegalBench Guha et al. (2023) paper: balanced accuracy. Balanced accuracy allows for handling better-imbalanced classification tasks, such as the ones presented in both benchmarks. We also use balanced accuracy for the legal tasks of MMLU. Unless otherwise noted, any score reported throughout this section refers to the balanced accuracy.
우리는 원래 LegalBench Guha 등(2023) 논문과 동일한 metric인 balanced accuracy를 사용합니다. Balanced accuracy는 두 벤치마크에 제시된 것과 같이 불균형한 분류 작업을 더 잘 처리할 수 있게 해줍니다. 또한 MMLU의 법률 작업에도 balanced accuracy를 사용합니다. 달리 명시되지 않는 한, 이 섹션 전체에서 보고된 모든 점수는 balanced accuracy를 나타냅니다.
우리는 원래 LegalBench Guha 등(2023) 논문과 동일한 메트릭인 균형 정확도를 사용합니다. 균형 정확도는 두 벤치마크에 제시된 것과 같이 불균형한 분류 작업을 더 잘 처리할 수 있게 해줍니다. 또한 MMLU의 법률 작업에도 균형 정확도를 사용합니다. 달리 명시되지 않는 한, 이 섹션 전체에서 보고된 모든 점수는 균형 정확도를 나타냅니다.