Chat GPT is a system developed by OpenAI based on the paper "Training language models to follow instructions with human feedback", which you can read here https://arxiv.org/abs/2203.02155. The paper focuses on aligning large language models (LLMs) to human intent using human feedback, also known as reinforcement learning from human feedback. By themselves, these models will try to predict the next token of text, which may not necessarily align with a useful or truthful answer, which RLFH rectifies. Chat GPT is the tool that allows users to interact with the LLM trained with RHLF. It is important to note that the model and data used to train Chat GPT is proprietary and unavailable to users. 

Open Assistant is being developed as an open-source alternative to Chat GPT, where the data collection for RLHF is crowdsourced. The goal is to create a tool that is similar in utility to Chat GPT, but can be used for free with open datasets and the availability to run the model on your own hardware and customize it on your task.
Chat GPT คือระบบที่พัฒนาโดย OpenAI โดยอิงจากรายงาน "โมเดลภาษาการฝึกอบรมให้ปฏิบัติตามคำแนะนำพร้อมคำติชมของมนุษย์" ซึ่งคุณสามารถอ่านได้ที่นี่ https://arxiv.org/abs/2203.02155 บทความนี้มุ่งเน้นไปที่การจัดแบบจำลองภาษาขนาดใหญ่ (LLM) ให้สอดคล้องกับเจตนาของมนุษย์โดยใช้ผลตอบรับของมนุษย์ หรือที่เรียกว่าการเรียนรู้แบบเสริมกำลังจากผลตอบรับของมนุษย์ แบบจำลองเหล่านี้จะพยายามทำนายโทเค็นถัดไปของข้อความด้วยตนเอง ซึ่งอาจไม่จำเป็นต้องสอดคล้องกับคำตอบที่เป็นประโยชน์หรือเป็นความจริง ซึ่ง RLFH แก้ไข Chat GPT เป็นเครื่องมือที่ให้ผู้ใช้สามารถโต้ตอบกับ LLM ที่ได้รับการฝึกอบรมกับ RHLF โปรดทราบว่าโมเดลและข้อมูลที่ใช้ในการฝึก Chat GPT นั้นเป็นกรรมสิทธิ์และผู้ใช้ไม่สามารถใช้งานได้ Open Assistant กำลังได้รับการพัฒนาให้เป็นทางเลือกโอเพ่นซอร์สแทน Chat GPT โดยที่การรวบรวมข้อมูลสำหรับ RLHF ได้รับการรวบรวมจากมวลชน เป้าหมายคือการสร้างเครื่องมือที่คล้ายคลึงกับยูทิลิตี้ Chat GPT แต่สามารถใช้งานได้ฟรีด้วยชุดข้อมูลแบบเปิดและความพร้อมใช้งานในการรันโมเดลบนฮาร์ดแวร์ของคุณเองและปรับแต่งตามงานของคุณ
spam fails_task lang_mismatch pii not_appropriate hate_speech sexual_content quality toxicity humor helpfulness creativity violence