\(\bullet\)**PKU-SafeRLHF**[181] encompasses more than 330K instances of expert comparison data, concentrating on the helpfulness and harmlessness. Each instance in the dataset includes a question and two responses, accompanied by safety labels for each response and two preference annotations between the two responses according to helpfulness and harmlessness. The harmlessness of a response indicates its classification as risk-neutral across all 14 harm categories, while the helpfulness of a response is evaluated based on its effectiveness in addressing the question.
\(\bullet\)**PKU-SafeRLHF**[181]은 유용성과 무해성에 중점을 둔 330K 이상의 전문가 비교 데이터를 포함하고 있습니다. 데이터셋의 각 인스턴스는 질문과 두 개의 응답을 포함하며, 각 응답에 대한 안전성 라벨과 유용성 및 무해성에 따른 두 응답 간의 선호도 주석이 함께 제공됩니다. 응답의 무해성은 14개의 모든 해악 범주에서 위험 중립으로 분류되는 것을 의미하며, 응답의 유용성은 질문에 대한 효과적인 해결 능력을 기준으로 평가됩니다.
\(\bullet\)**PKU-SafeRLHF**[181]는 유용성과 무해성에 중점을 둔 33만 개 이상의 전문가 비교 데이터를 포괄합니다. 데이터 세트의 각 인스턴스에는 질문과 두 개의 응답이 포함되며, 각 응답에 대한 안전 라벨과 유용성 및 무해성에 따른 두 응답 간의 선호도 주석 두 개가 포함됩니다. 응답의 무해성은 14가지 해악 범주에 걸쳐 위험 중립으로 분류되는지를 나타내며, 응답의 유용성은 질문에 대한 해결 효과를 기준으로 평가됩니다.