To evaluate the model's legal abilities, we use \(3\) benchmarks (i) we compare the perplexity of the backbones on \(5\) types of legal documents, (ii) we enhance LegalBench with LegalBench-Instruct for deeper evaluation, (iii) we rely on the legal section of MMLU for additional insights.
모델의 법률 능력을 평가하기 위해 (i) 5가지 유형의 법률 문서에 대한 백본의 perplexity를 비교하고, (ii) 더 깊은 평가를 위해 LegalBench를 LegalBench-Instruct로 개선하고, (iii) 추가 인사이트를 위해 MMLU의 법률 섹션에 의존하는 3가지 벤치마크를 사용합니다.
모델의 법률 능력을 평가하기 위해 (i) 5가지 유형의 법률 문서에 대한 백본의 당혹감을 비교하고, (ii) 더 깊은 평가를 위해 LegalBench-Instruct로 LegalBench를 개선하고, (iii) 추가 인사이트를 위해 MMLU의 법률 섹션에 의존하는 3가지 벤치마크를 사용합니다.