是否可以以qwen为基准模型参与Open LLM Leaderboard
#2
by
yyjjtt
- opened
您好，我想以qwen为基准模型做一些训练和尝试，然后想使用一下Open LLM Leaderboard看看我的评分，但是由于需要trust_remote_code=true，请问我怎么样才可以继续进行评测呢，或者说有没有什么办法把trust_remote_code=true去除
这很难办。Qwen目前不是HF官方支持的模型，OpenLLMLeaderboard自动是测不了的。Qwen基模型的结果是OpenLLMLeaderboard团队单独测试的（Chat模型都没测），我们也没啥办法。
jklj077
changed discussion status to
closed