The test items can be designed in several ways, with three approaches drawing the most attention in previous work: Multiple choice, Text continuation, and Chat response (free text). We opted to use chat response testing as this is best suited to our Scope and SUTs (see above). We only test single-turn chat responses.
테스트 항목은 여러 가지 방법으로 설계할 수 있으며, 이전 작업에서 가장 많은 attention을 끌고 있는 세 가지 접근 방식은 Multiple choice, Text continuation, Chat response (free text)입니다. 저희는 Chat response testing을 사용하기로 결정했는데, 이는 저희의 Scope와 SUT(위 참조)에 가장 적합하기 때문입니다. 단일 턴 Chat responses만 테스트합니다.
테스트 항목은 여러 가지 방법으로 설계할 수 있으며, 이전 작업에서 가장 많은 관심을 끌고 있는 세 가지 접근 방식은 객관식, 텍스트 연속, 채팅 응답(자유 텍스트)입니다. 저희는 채팅 응답 테스트를 사용하기로 결정했는데, 이는 저희의 범위와 SUT(위 참조)에 가장 적합하기 때문입니다. 단일 턴 채팅 응답만 테스트합니다.