where \(c\) represents the number of correct answers out of \(N\) responses. This metric considers a question to be solved if at least one correct answer is produced from \(N\) random generations. We employ this metric to reflect the potential or capability of a model in solving a math question. To enhance the diversity of the \(N\) generations, we set the temperature of the generation process to 0.73.
여기서 \(c\)는 \(N\)개의 응답 중 정답의 수를 나타냅니다. 이 metric은 \(N\)개의 무작위 생성에서 하나 이상의 정답이 생성되면 문제를 해결한 것으로 간주합니다. 이 metric을 사용하여 수학 문제를 해결할 때 모델의 잠재력 또는 능력을 반영합니다. \(N\) 세대의 다양성을 높이기 위해 generation 프로세스의 온도를 0.73으로 설정했습니다.
여기서 \(c\)는 \(N\)개의 응답 중 정답의 수를 나타냅니다. 이 메트릭은 \(N\)개의 무작위 생성에서 하나 이상의 정답이 생성되면 문제를 해결한 것으로 간주합니다. 이 메트릭을 사용하여 수학 문제를 해결할 때 모델의 잠재력 또는 능력을 반영합니다. N\) 세대의 다양성을 높이기 위해 생성 프로세스의 온도를 0.73으로 설정했습니다.