Complexity and unpredictabilityAI systems can accept a huge number of potential inputs and return a vast number of potential outputs. For instance, most LMs now have context windows of 4,000 tokens, and in some cases up to 200,000 or more--which is typically \(150+\) pages of text. Models often consist of billions of tunable parameters, each of which exerts some difficult-to-reason-about impact on the model's overall behavior. Furthermore, even when hyperparameters are set so that models' output is more deterministic (e.g., setting a low temperature), model responses are still probabilistic and conditioned on inputs. This can be a great strength as it allows for creative hallucinations and emergent behavior, such as reasoning about abstract concepts or creating novel content.25 However, it also makes it difficult to predict their behavior and ensure that none of their responses are unsafe.
복잡성과 예측 불가능성AI 시스템은 엄청나게 많은 잠재적 입력을 받아들이고 엄청나게 많은 잠재적 출력을 반환할 수 있습니다. 예를 들어, 대부분의 LMs에는 현재 4,000개의 토큰이라는 컨텍스트 창이 있으며, 경우에 따라서는 최대 200,000개 이상의 토큰이 있습니다(일반적으로 텍스트의 150페이지 이상). 모델은 조정 가능한 파라미터가 수십억 개에 달하며, 각 파라미터는 모델의 전반적인 동작에 어려운 추론이 필요한 영향을 미칩니다. 또한 하이퍼파라미터를 설정하여 모델의 출력을 보다 결정론적으로 만들더라도(예: 낮은 온도 설정), 모델의 응답은 여전히 확률적이며 입력에 따라 달라집니다. 이는 추상적인 개념에 대한 추론이나 새로운 콘텐츠 생성과 같은 창의적인 hallucination과 창발적 행동을 가능하게 하기 때문에 큰 강점이 될 수 있습니다. 그러나 이는 동작을 예측하고 응답 중 안전하지 않은 응답이 없는지 확인하기 어렵게 만듭니다.
복잡성과 예측 불가능성AI 시스템은 엄청나게 많은 잠재적 입력을 받아들이고 엄청나게 많은 잠재적 출력을 반환할 수 있습니다. 예를 들어, 대부분의 LM에는 현재 4,000개의 토큰이라는 컨텍스트 창이 있으며, 경우에 따라서는 최대 200,000개 이상의 토큰이 있습니다(일반적으로 텍스트의 150페이지 이상). 모델은 조정 가능한 파라미터가 수십억 개에 달하며, 각 파라미터는 모델의 전반적인 동작에 어려운 추론이 필요한 영향을 미칩니다. 또한 하이퍼파라미터를 설정하여 모델의 출력을 보다 결정론적으로 만들더라도(예: 낮은 온도 설정), 모델의 응답은 여전히 확률적이며 입력에 따라 달라집니다. 이는 추상적인 개념에 대한 추론이나 새로운 콘텐츠 생성과 같은 창의적인 환각과 창발적 행동을 가능하게 하기 때문에 큰 강점이 될 수 있습니다.25 그러나 이는 동작을 예측하고 응답 중 안전하지 않은 응답이 없는지 확인하기 어렵게 만듭니다.