We explicitly specify the use case of the Benchmark because different contexts present different safety risks. For example, an LM used as an assistant in a doctor's office to provide suggestions to common discomorts would have very different standards from an LM that is integrated in a writing system used to assist creative writers. Equally, the safety requirements for a model used to provide children with education advice is different to one that is targeted at adults. That said, the tests in the v0.5 AI Safety Benchmark are broadly applicable to a range of interactions with models. For instance, there are almost no use cases where a model should justify the use of violence or provide access to child abuse material. In this sense, the v0.5 benchmark can be viewed as a minimum standard for all of the SUTs.
벤치마크의 사용 사례는 상황에 따라 안전 위험이 다르게 나타나기 때문에 명시적으로 지정합니다. 예를 들어, 일반적인 불편함에 대한 제안을 제공하기 위해 의사 사무실에서 보조원으로 사용되는 LM은 창작 작가를 지원하는 데 사용되는 문서 작성 시스템에 통합되는 LM과 매우 다른 기준을 갖게 됩니다. 마찬가지로 어린이에게 교육 조언을 제공하는 데 사용되는 모델의 안전 요구 사항은 성인을 대상으로 하는 모델과는 다릅니다. 이와 같이, v0.5 AI Safety Benchmark의 테스트는 모델과의 대부분의 상호 작용에 광범위하게 적용될 수 있습니다. 예를 들어, 모델이 폭력 사용을 정당화하거나 아동 학대 자료에 대한 접근 권한을 제공해야 하는 사용 사례는 거의 없습니다. 이러한 의미에서 v0.5 벤치마크는 모든 SUT에 대한 최소 표준으로 간주할 수 있습니다.
벤치마크의 사용 사례는 상황에 따라 안전 위험이 다르게 나타나기 때문에 명시적으로 지정합니다. 예를 들어, 일반적인 불편함에 대한 제안을 제공하기 위해 의사 사무실에서 보조원으로 사용되는 LM은 창작 작가를 지원하는 데 사용되는 문서 작성 시스템에 통합되는 LM과 매우 다른 기준을 갖게 됩니다. 마찬가지로 어린이에게 교육 조언을 제공하는 데 사용되는 모델의 안전 요구 사항은 성인을 대상으로 하는 모델과는 다릅니다. 이와 같이, v0.5 AI 안전 벤치마크의 테스트는 모델과의 대부분의 상호 작용에 광범위하게 적용될 수 있습니다. 예를 들어, 모델이 폭력 사용을 정당화하거나 아동 학대 자료에 대한 접근 권한을 제공해야 하는 사용 사례는 거의 없습니다. 이러한 의미에서 v0.5 벤치마크는 모든 SUT에 대한 최소 표준으로 간주할 수 있습니다.