Update README.md
Browse files
README.md
CHANGED
@@ -8,7 +8,25 @@ This model quantized from openthaigpt/openthaigpt-1.0.0-beta-7b-chat-ckpt-hf to
|
|
8 |
Reference :
|
9 |
- https://huggingface.co/openthaigpt/openthaigpt-1.0.0-beta-7b-chat-ckpt-hf
|
10 |
- https://github.com/ggerganov/llama.cpp#prepare-data--run
|
11 |
-
|
|
|
12 |
```
|
13 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
14 |
```
|
|
|
8 |
Reference :
|
9 |
- https://huggingface.co/openthaigpt/openthaigpt-1.0.0-beta-7b-chat-ckpt-hf
|
10 |
- https://github.com/ggerganov/llama.cpp#prepare-data--run
|
11 |
+
|
12 |
+
Example run inference in colab.
|
13 |
```
|
14 |
+
# Download GUFF model from file and version.
|
15 |
+
!git clone https://github.com/ggerganov/llama.cpp.git
|
16 |
+
!pip install -r llama.cpp/requirements.txt
|
17 |
+
!./llama.cpp/main -m /content/openthaigpt-1.0.0-beta-7b-chat-ckpt-hf.gguf.Q4_0.bin -p "ยกตัวอย่างอาหารไทย สัก 5 ตัวอย่าง" -n 400 -e
|
18 |
+
|
19 |
+
#result example
|
20 |
+
#ยกตัวอย่างอาหารไทย สัก 5 ตัวอย่างมาแนะนำ
|
21 |
+
#ยากมากค่ะ เพราะแต่ละบ้านมีสูตรอาหารที่ต่างกัน บางคนทำอาหารอร่อยบางคนก็ใส่ขิงเยอะเกินไป ฯลฯ แต่เอาจริงๆ แล้ว อาหารไทยที่คนส่วนใหญ่ชอบทานคือ ปลาร้าทอด หรือปลาสลิดแห้ง แล้วก็ไก่ย่าง แต่นั่นไม่ได้แปลว่าคุณจะไม่มีอย่างอื่นที่จะลองได้ 🙂
|
22 |
+
#- ปลาร้าหรือปลาสลิงเป็นปลาน้ำเค็มที่ดองไว้ 2-7 เดือน บางครั้งก็ใช้ชื่อปลาสลิลก็ได้ ปลาสากจะปรุงแล้วกินกับไข่ต้ม น้ำจิ้มแจ่ว หรือผักหลายอย่าง และบางครั้งก็ใส่ข้าวด้วย ส่วนปลาสลิดแห้งคือปลาที่ใส่เกลือนานถึงปี จะทำให้หนังกรอบ เนื้อนุ่ม (เรียกอีกชื่อว่า "ปลากะทิก") บางบ้านก็เอามาทอดหรือแกงส้ม บางคนก็จะหั่นเป็นชิ้นเล็กๆ ใส่ในห่อใบตองแล้วนำไปตากแดดให้แห้ง
|
23 |
+
#- ไก่ย่างเป็นไก่ที่รับประทานกันอย่างแพร่หลาย มี 2 ประเภทที่นิยม คือ แบบที่ใช้เกลือและพริกไทย หรือแบบที่ปรุงด้วยน้ำมันงาเค็มทั้งตัว บางครั้งก็มีการใส่น้ำปลาพริกป่นอีกเล็กน้อย ส่วนประเภทที่สองนั้นจะกินคู่กับผักหรือเครื่องเคียง เช่น ถั่วงอก ลูกกระวาน กะปิ น้ำจิ้มแจ่ว ฯลฯ
|
24 |
+
#- ข้าวสาร เป็นข้าวที่ต้มสุกแล้วห่อใบตอง แล้วเอาไปตากแดดให้เหลืองกรอบ บางสูตรก็นึ่งข้าวเหนียวลงในภาชนะดินเผา หรือยัดลงไปในหม้อทองแดงกับน้ำเกลือเค็ม แล้วนำฝาลงอีกชั้นหนึ่ง มีบางสูตรก็นึ่งข้าวเหนียวใส่ในกะละมังหรือกระป๋องไม้จิ้มฟันก่อน จึงจะใส่ในกระชัง
|
25 |
+
#- หมูย่างเป็นหมูที่รับประทานกันในหลายวิธี เช่นหมักด้วยสมุนไพรแล้วเอาไปต้ม ผัดไฟ ย่าง น้ำปลา หรือกินแบบดิบๆ (เรียกว่า "บะระแต๋ว") บางบ้านก็ทำให้นุ่มโดยนำไปนึ่งกับดินเผา แล้วราดเกลือหรือน้ำมันงาก่อน ใส่ใบมะรุม ใบสะกัด แตงกวา ถั่วงอก ฯลฯ
|
26 |
+
#- ปลาร้าผัดขิง เป็นอาหารอย่างหนึ่งที่รับประทานกันในหลายวิธี เช่นหมักปลา
|
27 |
+
#llama_print_timings: load time = 1602.86 ms
|
28 |
+
#llama_print_timings: sample time = 354.40 ms / 400 runs ( 0.89 ms per token, 1128.68 tokens per second)
|
29 |
+
#llama_print_timings: prompt eval time = 6304.05 ms / 7 tokens ( 900.58 ms per token, 1.11 tokens per second)
|
30 |
+
#llama_print_timings: eval time = 338178.42 ms / 399 runs ( 847.56 ms per token, 1.18 tokens per second)
|
31 |
+
#llama_print_timings: total time = 345091.08 ms
|
32 |
```
|