GGUF
Japanese
English
mistral
Inference Endpoints
conversational
shisa-7b-v1-gguf / README.md
mmnga's picture
Update README.md
de0c78b
|
raw
history blame
1.06 kB
---
license: apache-2.0
tags:
- mistral
language:
- ja
- en
datasets:
- augmxnt/ultra-orca-boros-en-ja-v1
- Open-Orca/SlimOrca
- augmxnt/shisa-en-ja-dpo-v1
---
# shisa-7b-v1-gguf
[augmxntさんが公開しているshisa-7b-v1](https://huggingface.co/augmxnt/shisa-7b-v1)のggufフォーマット変換版です。
## Usage
```
git clone https://github.com/ggerganov/llama.cpp.git
cd llama.cpp
make -j
./main -m 'shisa-7b-v1-q4_0.gguf' -n 512 -p '[INST] <<sys>> あなたは熱狂的なポケモンファンです。 \n<</sys>> ポケモンの中で1番強いのはどのキャラクターですか。最強の者をひとつだけ挙げて下さい。その選択理由を説明してください。[/INST]' --temp 0.5
```
```
./main -m 'shisa-7b-v1-q4_K_M.gguf' -n 512 -p '[INST] <<sys>> あなたは日本語を英語に直す翻訳者です。 \n<</sys>> ポケモンの中で1番強いのはどのキャラクターですか。最強の者をひとつだけ挙げて下さい。その選択理由を説明してください。[/INST]' --temp 0.5
```