Update README.md
Browse files
README.md
CHANGED
@@ -3,7 +3,7 @@ license: mit
|
|
3 |
---
|
4 |
### 模型说明
|
5 |
#### 基于RWKV6-v2.1-3B 全新基模微调的nsfw语C模型
|
6 |
-
#### 非常感谢<b style="color:red">某不知名的神秘网友</b>提供的784条Claude超长上下文语料(单条长度超过120k
|
7 |
#### 使用7k长上下文微调19epoch后loss为1.7得到的模型
|
8 |
#### 因为超长上下文,继续微调应该还能提升效果,暂时只做测试,后续我会进行全面微调,敬请期待
|
9 |
|
|
|
3 |
---
|
4 |
### 模型说明
|
5 |
#### 基于RWKV6-v2.1-3B 全新基模微调的nsfw语C模型
|
6 |
+
#### 非常感谢<b style="color:red">某不知名的神秘网友</b>提供的784条Claude超长上下文语料(单条长度超过120k),此模型也是基于该语料进行的实验性质微调
|
7 |
#### 使用7k长上下文微调19epoch后loss为1.7得到的模型
|
8 |
#### 因为超长上下文,继续微调应该还能提升效果,暂时只做测试,后续我会进行全面微调,敬请期待
|
9 |
|