Looking ahead, we plan to explore Reinforcement Learning from Human Feedback (RLHF) or Reinforcement Learning from AI Instructed Feedback (RLAIF) to further align the models' output with human preferences. Moreover, we intend to adopt more advanced and effective quantization methods, such as GPTQ (Frantar et al., 2022), among others.
향후에는 모델의 출력을 사람의 선호도에 더 잘 맞추기 위해 Reinforcement Learning from Human Feedback (RLHF) 또는 인공지능 지시 피드백을 통한 강화 학습(RLAIF)을 연구할 계획입니다. 또한 GPTQ(Frantar et al., 2022) 등과 같은 보다 고급적이고 효과적인 quantization 방법을 채택할 계획입니다.
향후에는 모델의 출력을 사람의 선호도에 더 잘 맞추기 위해 인간 피드백을 통한 강화 학습(RLHF) 또는 인공지능 지시 피드백을 통한 강화 학습(RLAIF)을 연구할 계획입니다. 또한 GPTQ(Frantar et al., 2022) 등과 같은 보다 고급적이고 효과적인 양자화 방법을 채택할 계획입니다.