The AI Safety Benchmark does not evaluate the safety of AI models "in general." This is because the same model may perform differently, and have different safety requirements, depending on how it is deployed, for whom, and where. Instead, the benchmark tests a specific AI system in a specific use case and for a specific set of personas. It is also bounded by the tests (and test items) that have been created, which inevitably do not comprehensively reflect all possible hazards. This is an important difference with previous benchmarking efforts, which have not explicitly factored in these limitations and considerations to their design.
AI Safety Benchmark는 "일반적으로" AI 모델의 안전성을 평가하지 않습니다. 동일한 모델도 배포 방법, 대상, 장소에 따라 성능이 다르게 나타날 수 있으며, 안전 요구 사항도 다를 수 있기 때문입니다. 대신, 이 벤치마크는 특정 사용 사례와 특정 페르소나 집합에 대해 특정 AI 시스템을 테스트합니다. 또한 생성된 테스트(및 테스트 항목)에 의해 제한되므로 모든 가능한 위험을 포괄적으로 반영하지 못하는 경우가 있습니다. 이는 이러한 한계와 고려 사항을 설계에 명시적으로 고려하지 않은 이전 벤치마킹 노력과 중요한 차이점입니다.
AI 안전 벤치마크는 "일반적으로" AI 모델의 안전성을 평가하지 않습니다. 동일한 모델도 배포 방법, 대상, 장소에 따라 성능이 다르게 나타날 수 있으며, 안전 요구 사항도 다를 수 있기 때문입니다. 대신, 이 벤치마크는 특정 사용 사례와 특정 페르소나 집합에 대해 특정 AI 시스템을 테스트합니다. 또한 생성된 테스트(및 테스트 항목)에 의해 제한되므로 모든 가능한 위험을 포괄적으로 반영하지 못하는 경우가 있습니다. 이는 이러한 한계와 고려 사항을 설계에 명시적으로 고려하지 않은 이전 벤치마킹 노력과 중요한 차이점입니다.