A range of popular projects that benchmark the safety of AI models are listed below. They vary considerably in terms of what they focus on (e.g., existential risks or red teaming versus grounded risks); how they have been designed (using both AI and humans to generate datasets versus using'real-world' data); the hazard categories they cover; how they are evaluated; the type of models they can be used to assess; the languages they are in; and the quality, adversariality, and diversity of their prompts.
AI 모델의 안전성을 벤치마킹하는 인기 있는 프로젝트가 아래에 나열되어 있습니다. 실존적 위험 또는 red teaming과 grounded risks 중 무엇에 초점을 맞추는지, AI와 인간을 모두 사용하여 데이터 세트를 생성하는 방법과 '실제 데이터'를 사용하는 방법, 다루는 hazard categories, 평가 방법, 평가에 사용할 수 있는 모델 유형, 언어, 프롬프트의 품질, adversariality 및 다양성 등 다양한 측면에서 차이가 있습니다.
AI 모델의 안전성을 벤치마킹하는 인기 있는 프로젝트가 아래에 나열되어 있습니다. 실존적 위험 또는 레드 팀과 그라운드 위험 중 무엇에 초점을 맞추는지, AI와 인간을 모두 사용하여 데이터 세트를 생성하는 방법과 '실제 데이터'를 사용하는 방법, 다루는 위험 범주, 평가 방법, 평가에 사용할 수 있는 모델 유형, 언어, 프롬프트의 품질, 적대성 및 다양성 등 다양한 측면에서 차이가 있습니다.