We randomly hold out \(1\%\) of the training data for testing. We additionally evaluate on two datasets of human-written prompts: code prompts from Alpaca (Taori et al., 2023), and prompts extracted from the helpfulness and harmlessness data collected in Bai et al. (2022). Both datasets are drawn from different, more narrow distributions than our all-encompassing training dataset.
우리는 테스트를 위해 훈련 데이터의 \(1\%\)를 무작위로 보류합니다. 추가로 두 개의 인간 작성 프롬프트 데이터셋에서 평가를 수행합니다: Alpaca (Taori et al., 2023)에서 가져온 코드 프롬프트와 Bai et al. (2022)에서 수집된 유용성과 무해성 데이터에서 추출한 프롬프트입니다. 두 데이터셋 모두 우리의 포괄적인 훈련 데이터셋보다 더 좁은 분포에서 추출되었습니다.
훈련 데이터의 \(1\%\)를 무작위로 테스트를 위해 보류합니다. 또한 인간이 작성한 프롬프트의 두 가지 데이터 세트에 대해 평가합니다: 알파카의 코드 프롬프트(Taori et al., 2023)와 Bai et al. (2022)에서 수집한 유용성 및 무해성 데이터에서 추출한 프롬프트입니다. 두 데이터 세트 모두 포괄적인 훈련 데이터 세트와는 다른, 더 좁은 분포에서 추출되었습니다.