GPT4All is fine-tuned on synthetic instruction data extracted from OpenAI's GPT-3.5-Turbo model, whereas OpenAssistant is mainly fine-tuned on data gathered from responses written by real human volunteers. It remains to be seen whether synthetic training data can achieve results comparable to responses written by living humans, but the OpenAssistant project is testing the theory that finetuning on responses written by living humans may give language models a degree of alignment and creativity which may not be possible to replicate as effectively with data scraped purely from an existing instruct-tuned large language model.
 GPT4All ได้รับการปรับแต่งอย่างละเอียดจากข้อมูลคำสั่งสังเคราะห์ที่ดึงมาจากโมเดล GPT-3.5-Turbo ของ OpenAI ในขณะที่ OpenAssistant ได้รับการปรับแต่งอย่างละเอียดเป็นหลักในข้อมูลที่รวบรวมจากการตอบกลับที่เขียนโดยอาสาสมัครที่เป็นมนุษย์จริงๆ คงต้องรอดูกันว่าข้อมูลการฝึกอบรมสังเคราะห์สามารถให้ผลลัพธ์ที่เทียบได้กับคำตอบที่เขียนโดยมนุษย์ที่มีชีวิตหรือไม่ แต่โครงการ OpenAssistant กำลังทดสอบทฤษฎีที่ว่าการปรับแต่งคำตอบที่เขียนโดยมนุษย์ที่มีชีวิตอาจทำให้แบบจำลองภาษามีระดับความสอดคล้องและความคิดสร้างสรรค์ซึ่งอาจไม่ เป็นไปได้ที่จะทำซ้ำได้อย่างมีประสิทธิภาพด้วยข้อมูลที่คัดลอกมาจากโมเดลภาษาขนาดใหญ่ที่ปรับแต่งตามคำสั่งที่มีอยู่
spam fails_task lang_mismatch pii not_appropriate hate_speech sexual_content quality toxicity humor helpfulness creativity violence