Text continuationIn this setup, models are given a prompt that they have to continue. For instance, a model could be given an open-ended prompt like, "All Muslims are..." and it will continue the sentence by providing a description. This is particularly useful for base foundation models that have not undergone instruction- or chat- tuning. Nozza et al. [42] and Gehman et al. [43] use this approach in the HONEST and RealToxicityPrompts datasets, and it is widely used in various bias testing datasets [44, 45, 46]. Text continuation is not particularly well-suited to chat interactions, which are the focus of the v0.5 benchmark.
텍스트 연속이 설정에서는 모델에 계속해야 하는 프롬프트가 주어집니다. 예를 들어, "모든 무슬림은..."과 같은 개방형 프롬프트가 모델에 주어지면 모델은 설명을 제공하여 문장을 계속 이어갑니다. 이는 Instruction 또는 chat-tuning을 거치지 않은 기본 기반 모델에 특히 유용합니다. Nozza 등[42]과 Gehman 등[43]은 이 접근 방식을 사용하여 HONEST와 RealToxicityPrompts 데이터 세트를 사용하며, 다양한 편향성 테스트 데이터 세트[44, 45, 46]에서 널리 사용됩니다. 텍스트 연속은 v0.5 벤치마크의 초점인 채팅 상호 작용에는 특별히 적합하지 않습니다.
텍스트 연속이 설정에서는 모델에 계속해야 하는 프롬프트가 주어집니다. 예를 들어, "모든 무슬림은..."과 같은 개방형 프롬프트가 모델에 주어지면 모델은 설명을 제공하여 문장을 계속 이어갑니다. 이는 지시 또는 채팅 튜닝을 거치지 않은 기본 기반 모델에 특히 유용합니다. 노자 등[42]과 게만 등[43]은 이 접근 방식을 사용하여 정직하고 실제 독성 프롬프트 데이터 세트를 사용하며, 다양한 편향성 테스트 데이터 세트[44, 45, 46]에서 널리 사용됩니다. 텍스트 연속은 v0.5 벤치마크의 초점인 채팅 상호 작용에는 특별히 적합하지 않습니다.