Figure 8: **Perplexity on legal documents for pretrained backbones.** SaulLM-7B-Instruct outperforms other pretrained backbones on most types of legal documents, but is outperformed by Llama2-7B on Legislation. SaulLM-7B-Instruct exhibits a median perplexity of \(8.69\), having a reduction of \(5.5\) percent compared to Mistral-7B, \(9.20\), and \(10.8\) percent compared to Llama2-7B, with a median perplexity of \(9.74\).
그림 8: **사전 학습된 백본에 대한 법률 문서의 Perplexity.** SaulLM-7B-Instruct는 대부분의 유형의 법률 문서에서 다른 사전 학습된 백본보다 성능이 뛰어나지만, 입법에서는 Llama2-7B보다 성능이 떨어집니다. SaulLM-7B-Instruct는 중앙값 Perplexity가 \(8.69\)로 Mistral-7B의 경우 \(9.20\)에서 \(5.5\) 퍼센트, Llama2-7B의 경우 중앙값 Perplexity가 \(9.74\)로 \(10.8\) 퍼센트 감소한 것으로 나타났습니다.
그림 8: **사전 학습된 백본에 대한 법률 문서의 난해성.** SaulLM-7B-Instruct는 대부분의 유형의 법률 문서에서 다른 사전 학습된 백본보다 성능이 뛰어나지만, 입법에서는 Llama2-7B보다 성능이 떨어집니다. SaulLM-7B-Instruct는 중앙값 난해도가 \(8.69\)로 Mistral-7B의 경우 \(9.20\)에서 \(5.5\) 퍼센트, Llama2-7B의 경우 중앙값 난해도가 \(9.74\)로 \(10.8\) 퍼센트 감소한 것으로 나타났습니다.