3. DecodingTrust is a benchmark that covers eight dimensions of safety in English [153]. It covers a range of criteria, from toxicity to privacy and machine ethics. The benchmark has a widely-used leaderboard that is hosted on HuggingFace.30 Footnote 30: [https://huggingface.co/spaces/AI-Secure/llm-trustworthy-leaderboard](https://huggingface.co/spaces/AI-Secure/llm-trustworthy-leaderboard)
4. SafetyBench is a benchmark that covers eight categories of safety, in both English and Chinese [37]. It comprises multiple choice questions. They test 25 models and find that GPT-4 consistently performs best. 5. BiasesLLM is a leaderboard for evaluating the biases of LMs. it tests seven ethical biases, including ageism, political bias, and xenophobia.31 Footnote 31: [https://livablesoftware.com/biases-llm-leaderboard/](https://livablesoftware.com/biases-llm-leaderboard/)
6. BIG-bench contains tests that are related to safety, such as pro- and anti- social behavior like toxicity, bias, and truthfulness [20]. 7. HELM contains tests that are related to safety, such as toxicity, bias, disinformation, copyright infringement, and truthfulness [19]. 8. SafetyPrompts32 is a website that hosts datasets for evaluating the safety of models [13]. It does not aggregate or combine datasets but it makes them available for developers to easily find and use. Footnote 32: [https://safetyprompts.com/](https://safetyprompts.com/)
9. Numerous individual datasets have been released for assessing safety risks of models, such as Malicious Instructions [68], ToxicChat [166] and HarmfulQA [167]. 10. METR's Task Suite is an evaluation suite that elicits the capabilities of frontier models [168]. It includes tasks that present grounded risks to individuals (e.g., phishing) as well as extreme risks.
디코딩Trust는 영어로 안전의 8가지 차원을 다루는 benchmark입니다[153]. 독성부터 개인정보 보호, 기계 윤리에 이르기까지 다양한 기준을 다룹니다. 이 benchmark에는 HuggingFace에서 호스팅하는 널리 사용되는 leaderboard가 있습니다.30 각주 30: [https://huggingface.co/spaces/AI-Secure/llm-trustworthy-leaderboard](https://huggingface.co/spaces/AI-Secure/llm-trustworthy-leaderboard)
SafetyBench는 영어와 중국어로 8가지 범주의 안전성을 다루는 benchmark입니다[37]. 이 benchmark는 객관식 문제로 구성되어 있습니다. 25개의 모델을 테스트한 결과 GPT-4가 일관되게 최고의 성능을 발휘하는 것으로 나타났습니다. BiasesLLM은 LM의 편향성을 평가하기 위한 leaderboard입니다. 연령 차별, 정치적 편견, 외국인 혐오 등 7가지 윤리적 편견을 테스트합니다.31 각주 31: [https://livablesoftware.com/biases-llm-leaderboard/](https://livablesoftware.com/biases-llm-leaderboard/)
BIG-bench에는 독성, 편견, 진실성 등 친사회적 행동과 반사회적 행동과 같은 안전과 관련된 테스트가 포함되어 있습니다[20]. HELM에는 독성, 편견, 허위 정보, 저작권 침해, 진실성 등 안전과 관련된 테스트가 포함되어 있습니다[19]. SafetyPrompts32는 모델의 안전성을 평가하기 위한 데이터 세트를 호스팅하는 웹사이트입니다[13]. 이 웹사이트는 데이터 세트를 집계하거나 결합하지는 않지만 개발자가 쉽게 찾아서 사용할 수 있도록 합니다. 각주 32: [https://safetyprompts.com/](https://safetyprompts.com/)
악의적인 Instructions[68], ToxicChat[166], HarmfulQA[167] 등 모델의 안전 위험을 평가하기 위한 수많은 개별 데이터 세트가 공개되었습니다. METR의 Task Suite는 최첨단 모델의 기능을 이끌어내는 평가 스위트입니다[168]. 여기에는 개인에게 근거 있는 위험(예: 피싱)과 극단적인 위험을 나타내는 작업이 포함되어 있습니다.
3. 디코딩트러스트는 영어로 안전의 8가지 차원을 다루는 벤치마크입니다[153]. 독성부터 개인정보 보호, 기계 윤리에 이르기까지 다양한 기준을 다룹니다. 이 벤치마크에는 HuggingFace에서 호스팅하는 널리 사용되는 리더보드가 있습니다.30 각주 30: [https://huggingface.co/spaces/AI-Secure/llm-trustworthy-leaderboard](https://huggingface.co/spaces/AI-Secure/llm-trustworthy-leaderboard)
4. SafetyBench는 영어와 중국어로 8가지 범주의 안전성을 다루는 벤치마크입니다[37]. 이 벤치마크는 객관식 문제로 구성되어 있습니다. 25개의 모델을 테스트한 결과 GPT-4가 일관되게 최고의 성능을 발휘하는 것으로 나타났습니다. 5. BiasesLLM은 LM의 편향성을 평가하기 위한 리더보드입니다. 연령 차별, 정치적 편견, 외국인 혐오 등 7가지 윤리적 편견을 테스트합니다.31 각주 31: [https://livablesoftware.com/biases-llm-leaderboard/](https://livablesoftware.com/biases-llm-leaderboard/)
6. BIG-bench에는 독성, 편견, 진실성 등 친사회적 행동과 반사회적 행동과 같은 안전과 관련된 테스트가 포함되어 있습니다[20]. 7. HELM에는 독성, 편견, 허위 정보, 저작권 침해, 진실성 등 안전과 관련된 테스트가 포함되어 있습니다[19]. 8. SafetyPrompts32는 모델의 안전성을 평가하기 위한 데이터 세트를 호스팅하는 웹사이트입니다[13]. 이 웹사이트는 데이터 세트를 집계하거나 결합하지는 않지만 개발자가 쉽게 찾아서 사용할 수 있도록 합니다. 각주 32: [https://safetyprompts.com/](https://safetyprompts.com/)
9. 악의적인 지침[68], ToxicChat[166], HarmfulQA[167] 등 모델의 안전 위험을 평가하기 위한 수많은 개별 데이터 세트가 공개되었습니다. 10. METR의 태스크 스위트는 최첨단 모델의 기능을 이끌어내는 평가 스위트입니다[168]. 여기에는 개인에게 근거 있는 위험(예: 피싱)과 극단적인 위험을 나타내는 작업이 포함되어 있습니다.