Automatic raters of faithfulness:We implement our automatic raters by prompting an LLM in a zero-shot manner to verify a single claim given evidence from the book (Table 13), where the evidence can be one of the following:
신뢰성의 자동 평가자: 우리는 책에서 제공된 증거를 바탕으로 단일 주장을 검증하기 위해 LLM을 제로샷 방식으로 프롬프트하여 자동 평가자를 구현합니다 (표 13). 여기서 증거는 다음 중 하나일 수 있습니다:
충실도의 자동 평가자: 책의 증거가 주어졌을 때 하나의 주장을 검증하도록 LLM을 제로 샷 방식으로 프롬프트하여 자동 평가자를 구현합니다(표 13). 여기서 증거는 다음 중 하나일 수 있습니다: