We use the following three dimensions for selecting samples: similarity to task data (ETS-DACP), perplexity as a proxy for novelty (ETA-DACP), and diversity measured by token type entropy (ETA-DACP). In order to convert metric values into sampling probabilities, we propose a method based on quantile ranges. To achieve this, we first calculate the 0-100 quantiles for each metric within the training data. By dividing the range into 100 intervals using the 100 quantile values, documents are then assigned probabilities corresponding to the interval they fall into. This approach effectively normalizes our metrics, allowing for the aggregation of different metric types.
우리는 샘플을 선택하기 위해 작업 데이터와의 유사성(ETS-DACP), 새로움의 대리 역할을 하는 Perplexity(ETA-DACP), 토큰 유형 엔트로피로 측정한 다양성(ETA-DACP)의 세 가지 차원을 사용합니다. Metric 값을 샘플링 확률로 변환하기 위해 Quantile 범위를 기반으로 하는 방법을 제안합니다. 이를 위해 먼저 훈련 데이터 내에서 각 Metric에 대한 0-100 Quantile을 계산합니다. 100 Quantile 값을 사용하여 범위를 100개의 간격으로 나눈 다음, 문서는 해당 문서가 속한 간격에 해당하는 확률을 할당받습니다. 이 접근 방식은 Metric을 효과적으로 정규화하여 서로 다른 Metric 유형을 통합할 수 있도록 합니다.
우리는 샘플을 선택하기 위해 작업 데이터와의 유사성(ETS-DACP), 새로움의 대리 역할을 하는 당혹감(ETA-DACP), 토큰 유형 엔트로피로 측정한 다양성(ETA-DACP)의 세 가지 차원을 사용합니다. 메트릭 값을 샘플링 확률로 변환하기 위해 분위수 범위를 기반으로 하는 방법을 제안합니다. 이를 위해 먼저 훈련 데이터 내에서 각 메트릭에 대한 0-100 분위수를 계산합니다. 100 분위수 값을 사용하여 범위를 100개의 간격으로 나눈 다음, 문서는 해당 문서가 속한 간격에 해당하는 확률을 할당받습니다. 이 접근 방식은 메트릭을 효과적으로 정규화하여 서로 다른 메트릭 유형을 통합할 수 있도록 합니다.