\(\bullet\)_GPT-4_. As another remarkable progress, GPT-4 [46] was released in March 2023, which extended the text input to multimodal signals. Overall, GPT-4 has stronger capacities in solving complex tasks than GPT-3.5, showing a large performance improvement on many evaluation tasks. A recent study [41] investigated the capacities of GPT-4 by conducting qualitative tests with human-generated problems, spanning a diverse range of difficult tasks, and showed that GPT-4 can achieve more superior performance than prior GPT models such as ChatGPT. Furthermore, GPT-4 responds more safely to malicious or provocative queries, due to a six-month iterative alignment (with an additional safety reward signal in the RLHF training). In the technical report, OpenAI has emphasized how to safely develop GPT-4 and applied a number of intervention strategies to mitigate the possible issues of LLMs, such as hallucinations, privacy and overreliance. For example, they introduced the mechanism called _red teaming_[132] to reduce the harm or toxic content generation. As another important aspect, GPT-4 has been developed on a well-established deep learning infrastructure with improved optimization methods. They introduced a new mechanism called _predictable scaling_ that can accurately predict the final performance with a small proportion of compute during model training.
\(\bullet\)_GPT-4_. 또 다른 주목할 만한 진전으로, 2023년 3월에 텍스트 입력을 멀티모달 신호로 확장한 GPT-4 [46]가 출시되었습니다. 전반적으로 GPT-4는 GPT-3.5보다 복잡한 작업을 해결하는 능력이 더 강하며, 많은 평가 작업에서 큰 성능 향상을 보여줍니다. 최근 연구 [41]에서는 인간이 생성한 문제를 사용하여 정성적 테스트를 수행하여 다양한 범위의 어려운 작업을 수행함으로써 GPT-4의 역량을 조사했으며, GPT-4가 ChatGPT와 같은 이전 GPT 모델보다 더 우수한 성능을 달성할 수 있음을 보여주었습니다. 또한 GPT-4는 악의적이거나 도발적인 쿼리에 대해 더 안전하게 응답하며, 이는 RLHF 훈련에서 추가 안전 보상 신호를 통해 6개월에 걸쳐 반복적으로 정렬된 결과입니다. 기술 보고서에서 OpenAI는 GPT-4를 안전하게 개발하는 방법을 강조하고 hallucination, 개인정보 보호, 과의존과 같은 LLM의 가능한 문제를 완화하기 위해 여러 개입 전략을 적용했습니다. 예를 들어, 해를 입히거나 유독한 콘텐츠를 생성하는 것을 줄이기 위해 'red teaming'[132]이라는 메커니즘을 도입했습니다. 또 다른 중요한 측면으로서 GPT-4는 개선된 optimization 방법을 통해 잘 구축된 딥러닝 인프라에서 개발되었습니다. 모델 학습 중에 적은 비율의 컴퓨팅으로 최종 성능을 정확하게 예측할 수 있는 'predictable scaling'이라는 새로운 메커니즘을 도입했습니다.
\(\bullet\)_GPT-4_. 또 다른 주목할 만한 진전으로, 2023년 3월에 텍스트 입력을 멀티모달 신호로 확장한 GPT-4 [46]가 출시되었습니다. 전반적으로 GPT-4는 GPT-3.5보다 복잡한 작업을 해결하는 능력이 더 강하며, 많은 평가 작업에서 큰 성능 향상을 보여줍니다. 최근 연구 [41]에서는 인간이 생성한 문제를 사용하여 정성적 테스트를 수행하여 다양한 범위의 어려운 작업을 수행함으로써 GPT-4의 역량을 조사했으며, GPT-4가 ChatGPT와 같은 이전 GPT 모델보다 더 우수한 성능을 달성할 수 있음을 보여주었습니다. 또한 GPT-4는 악의적이거나 도발적인 쿼리에 대해 더 안전하게 응답하며, 이는 RLHF 훈련에서 추가 안전 보상 신호를 통해 6개월에 걸쳐 반복적으로 정렬된 결과입니다. 기술 보고서에서 OpenAI는 GPT-4를 안전하게 개발하는 방법을 강조하고 환각, 개인정보 보호, 과의존과 같은 LLM의 가능한 문제를 완화하기 위해 여러 개입 전략을 적용했습니다. 예를 들어, 해를 입히거나 유독한 콘텐츠를 생성하는 것을 줄이기 위해 '레드 팀'[132]이라는 메커니즘을 도입했습니다. 또 다른 중요한 측면으로서 GPT-4는 개선된 최적화 방법을 통해 잘 구축된 딥러닝 인프라에서 개발되었습니다. 모델 학습 중에 적은 비율의 컴퓨팅으로 최종 성능을 정확하게 예측할 수 있는 '예측 가능한 스케일링'이라는 새로운 메커니즘을 도입했습니다.