license:cc-by-4.0 region:us
---
license: cc-by-4.0
---
<p align="center" width="100%">
<a ><img src="https://raw.githubusercontent.com/alipay/financial_evaluation_dataset/main/resources/fineval_logo.png" title="Fin-Eval" alt="Fin-Eval" style="width: 30%; min-width: 300px; display: block; margin: auto;"></a>
</p>

<div style="text-align: center;">
    <p>Fin-Eval金融任务评估集</p>
</div>

### 任务介绍
Fin-Eval是金融行业为大模型而生的专业数据评测集，涵盖认知、生成、金融知识、金融逻辑以及安全合规五大类能力共28个子任务。在设计任务时，充分考虑到大模型在In-Context Learning、工具调用、CoT等方面的特点。

Fin-Eval涵盖了财富管理、保险、投资研究等多个金融领域，数据源包括蚂蚁各业务领域、开源数据，模型蒸馏，在经过数据脱敏、文本聚类、语料精筛等处理过程后，结合金融领域专家的深度加工最终构建而成。我们希望Fin-Eval不仅是一个金融评估数据集，更希望抛砖引玉，帮助加速领域的发展，拓展金融大模型应用的边界。

目前Fin-Eval对外开放评测示例，未来持续开放平台化评测托管服务，为行业提供一站式评估。


### 数据读取
```python
from datasets import load_dataset
dataset=load_dataset("Fin-Eval/Fin-Eval", name="test")
print(dataset["test"][0])
# {'id': 1, '大类': '认知', '任务': '金融意图理解', '问题': '近期美元汇率有没有大幅波动', '答案': '行情解读', '解释': None}
```

更多数据集使用细节和评估方法见[github page](https://github.com/alipay/financial_evaluation_dataset)

如果需要全量数据集，请发送邮件申请授权：联系邮箱 Fin-eval@antgroup.com。