Comparing with the Open-Source Models.In Table 1, we conduct a comprehensive comparison of our _WizardCoder_ with other open-source models on the HumanEval and MBPP benchmarks. In contrast to the results presented in Figure 1, we adhere to the approach outlined in previous studies [31] by generating n samples for each problem to estimate the pass@1 score. The findings presented in Table 1 clearly demonstrate that our _WizardCoder_ exhibits a substantial performance advantage over all the open-source models.
오픈 소스 모델과 비교. 표 1에서는 HumanEval과 MBPP 벤치마크에서 우리의 _WizardCoder_를 다른 오픈 소스 모델과 종합적으로 비교합니다. 그림 1에 제시된 결과와는 달리, 우리는 pass@1 점수를 추정하기 위해 각 문제에 대해 n개의 샘플을 생성하는 이전 연구 [31]에 설명된 접근 방식을 따릅니다. 표 1에 제시된 결과는 우리의 _WizardCoder_가 모든 오픈 소스 모델에 비해 상당한 성능 우위를 보여주고 있음을 분명히 보여줍니다.
오픈 소스 모델과 비교.표 1에서는 휴먼이발과 MBPP 벤치마크에서 우리의 _WizardCoder_를 다른 오픈 소스 모델과 종합적으로 비교합니다. 그림 1에 제시된 결과와는 달리, 우리는 통과@1 점수를 추정하기 위해 각 문제에 대해 n개의 샘플을 생성하는 이전 연구 [31]에 설명된 접근 방식을 따릅니다. 표 1에 제시된 결과는 우리의 _WizardCoder_가 모든 오픈 소스 모델에 비해 상당한 성능 우위를 보여주고 있음을 분명히 보여줍니다.