File size: 1,925 Bytes
ab74d6a 2597332 ab74d6a 2597332 78df194 5ea661f 78df194 5ea661f 78df194 5ea661f 2597332 5f562eb 2597332 5f562eb 2597332 |
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 |
---
license: apache-2.0
language:
- ja
---
# line-corporation/japanese-large-lm-3.6b-instruction-sft
[line-corporationさんが公開しているjapanese-large-lm-3.6b-instruction-sft](https://huggingface.co/line-corporation/japanese-large-lm-3.6b-instruction-sft)のgguf変換版です。
他モデルはこちら
GPT-NEOX
[mmnga/line-corp-japanese-large-lm-3.6b-gguf](https://huggingface.co/mmnga/line-corp-japanese-large-lm-3.6b-gguf)
[mmnga/line-corp-japanese-large-lm-3.6b-instruction-sft-gguf](https://huggingface.co/mmnga/line-corp-japanese-large-lm-3.6b-instruction-sft-gguf)
GPT-2
[mmnga/line-corp-japanese-large-lm-1.7b-gguf](https://huggingface.co/mmnga/line-corp-japanese-large-lm-1.7b-gguf)
[mmnga/line-corp-japanese-large-lm-1.7b-instruction-sft-gguf](https://huggingface.co/mmnga/line-corp-japanese-large-lm-1.7b-instruction-sft-gguf)
*注意:こちらはブランチで試用になります。llama.cpp本家にgptneox, gpt2が実装された時に、このggufファイルが使用できない可能性があります。*
***[GitHubリポジトリの readme はこちら](https://github.com/mmnga/llama.cpp/tree/mmnga-dev)***
## Usage (試用)
```
git clone --branch mmnga-dev https://github.com/mmnga/llama.cpp.git
cd llama.cpp
make -j
./main -m 'line-corp-japanese-large-lm-3.6b-instruction-sft-q4_0.gguf' -n 128 -p '吾輩は猫である。名前は実を言うと、' --top_p 0.9 --temp 0.7 --repeat-penalty 1.1
```
**CUBLAS**
```
LLAMA_CUBLAS=1 make -j
./main -m 'line-corp-japanese-large-lm-3.6b-instruction-sft-q4_0.gguf' -n 128 -p '吾輩は猫である。名前は実を言うと、' -ngl 32
```
**従来のCPU実行**
~~~~bash
git clone --branch mmnga-dev https://github.com/mmnga/llama.cpp.git
cd llama.cpp
make -j gptneox
./gptneox -m 'line-corp-japanese-large-lm-3.6b-instruction-sft-q4_0.gguf' -n 128 -p 'ユーザー: 吾輩って猫ですか？ システム: '
~~~~
|