有没有fp16的版本,这个是 fp32的是吧。

#4
by redauzhang - opened

有没有fp16的版本,这个是 fp32的是吧。 如果要自己转换,可以用transformer转换么,是否有对应的操作教程

另外实际生产环境中如果有13b-fp16和 7b-fp32. 我们一般怎么抉择。

Sign up or log in to comment