Automated evaluation introduces some errorsSUTs' responses are assessed automatically using LlamaGuard [59]. We validated the high accuracy of this model in Section 5.2.1. However, it does make some errors, which could result in incorrect grades being assigned to some SUTs.
자동 평가에는 일부 오류가 발생합니다. SUTs의 응답은 LlamaGuard [59]를 사용하여 자동으로 평가됩니다. 우리는 5.2.1절에서 이 모델의 높은 정확성을 검증했습니다. 그러나 이 모델은 일부 오류를 발생시킬 수 있으며, 이는 일부 SUTs에 잘못된 점수가 부여될 수 있습니다.
자동 평가는 일부 오류를 도입합니다SUT의 응답은 LlamaGuard [59]를 사용하여 자동으로 평가됩니다. 이 모델의 높은 정확도는 섹션 5.2.1에서 검증했습니다. 그러나 일부 SUT에 잘못된 등급이 부여될 수 있는 몇 가지 오류가 있습니다.