Figure 7: Investigating the necessity of the re-clustering step in D4. We see that re-clustering improves perplexity across Web snapshots (left), Non-web snapshots (middle-left), and Instruct + Answers (middle-right). Right: Empirical CDF of mean distance to centroid, with and without re-clustering. Re-clustering removes duplicate driven clusters (clusters with low mean distance to centroid).
그림 7: D4에서 재클러스터링 단계의 필요성을 조사합니다. 재클러스터링이 웹 스냅샷(왼쪽), 비웹 스냅샷(가운데 왼쪽), Instruct + Answers(가운데 오른쪽)에서 perplexity를 개선하는 것을 알 수 있습니다. 오른쪽: 재클러스터링을 하거나 하지 않은 경우의 평균 중심점까지의 거리의 경험적 CDF. 재클러스터링은 중복 클러스터(평균 중심점까지의 거리가 낮은 클러스터)를 제거합니다.
그림 7: D4에서 재클러스터링 단계의 필요성을 조사합니다. 재클러스터링이 웹 스냅샷(왼쪽), 비웹 스냅샷(가운데 왼쪽), 인스트럭트 + 답변(가운데 오른쪽)에서 난해성을 개선하는 것을 알 수 있습니다. 오른쪽: 재클러스터링을 하거나 하지 않은 경우의 평균 중심점까지의 거리의 경험적 CDF. 재클러스터링은 중복 클러스터(평균 중심점까지의 거리가 낮은 클러스터)를 제거합니다.