The v0.5 benchmark is a Proof-of-Concept for the WG's approach to AI safety evaluation, and a precursor to release of the full v1.0 benchmark, which is planned by the end of 2024. The v0.5 benchmark comprises seven tests (one for each of seven hazard categories) in the English language. By building it, and testing more than a dozen models against it, we have been able to assess the feasibility, strengths, and weaknesses of our approach. The v1.0 benchmark will provide meaningful insights into the safety of AI systems but **the v0.5 benchmark should not be used to actually assess the safety of AI systems**.
v0.5 benchmark는 AI 안전 평가에 대한 WG의 접근 방식에 대한 개념 증명이며, 2024년 말까지 출시될 예정인 v1.0 benchmark의 전신입니다. v0.5 benchmark는 영어로 된 7가지 위험 범주에 각각 하나씩 총 7가지 테스트로 구성되어 있습니다. 이 benchmark를 구축하고 12개 이상의 모델을 테스트함으로써 접근 방식의 타당성, 강점, 약점을 평가할 수 있었습니다. v1.0 benchmark는 AI 시스템의 안전성에 대한 의미 있는 인사이트를 제공할 것이지만, **v0.5 benchmark는 실제로 AI 시스템의 안전성을 평가하는 데 사용해서는 안 됩니다**.
v0.5 벤치마크는 AI 안전 평가에 대한 WG의 접근 방식에 대한 개념 증명이며, 2024년 말까지 출시될 예정인 v1.0 벤치마크의 전신입니다. v0.5 벤치마크는 영어로 된 7가지 위험 범주에 각각 하나씩 총 7가지 테스트로 구성되어 있습니다. 이 벤치마크를 구축하고 12개 이상의 모델을 테스트함으로써 접근 방식의 타당성, 강점, 약점을 평가할 수 있었습니다. v1.0 벤치마크는 AI 시스템의 안전성에 대한 의미 있는 인사이트를 제공할 것이지만, **v0.5 벤치마크는 실제로 AI 시스템의 안전성을 평가하는 데 사용해서는 안 됩니다**.