Evaluation of other generative tasks such as machine translation are based on metrics such as Rouge and BLEU. These scores work well when there is a reference text as ground truth (such as translation) and a hypothesis that is generated by the generative model, in our case the LLM. These scores are mostly used for cases where the goal is to detect the similarity of the answer and ground truth in a computation manner. In a computation manner, it meant that nothing more than N-Grams would be used.
기계 번역과 같은 다른 생성 작업의 평가는 Rouge 및 BLEU와 같은 metrics를 기반으로 합니다. 이러한 scores는 기준 텍스트(예: 번역)가 기준 참고 문헌으로 있고 생성 모델(이 경우 LLM)에 의해 생성된 가설이 있는 경우에 잘 작동합니다. 이러한 scores는 주로 계산 방식으로 답변과 기준 참고 문헌의 유사성을 감지하는 것을 목표로 하는 경우에 사용됩니다. 계산 방식에서 N-그램 이상의 것이 사용되지 않는다는 의미입니다.
기계 번역과 같은 다른 생성 작업의 평가는 Rouge 및 BLEU와 같은 메트릭을 기반으로 합니다. 이러한 점수는 기준 텍스트(예: 번역)가 기준 참고 문헌으로 있고 생성 모델(이 경우 LLM)에 의해 생성된 가설이 있는 경우에 잘 작동합니다. 이러한 점수는 주로 계산 방식으로 답변과 기준 참고 문헌의 유사성을 감지하는 것을 목표로 하는 경우에 사용됩니다. 계산 방식에서 N-그램 이상의 것이 사용되지 않는다는 의미입니다.