As a final stress test, we found that all open language models that use RMSNorm do not use any bias terms (Biderman, 2024). Therefore, we checked that our attack would not give a false positive when applied to a model with RMSNorm but with biases.
최종 스트레스 테스트로, RMSNorm을 사용하는 모든 공개 언어 모델이 어떠한 바이어스 항도 사용하지 않는다는 것을 발견했습니다 (Biderman, 2024). 따라서, 우리는 RMSNorm을 사용하지만 바이어스를 가진 모델에 적용했을 때 우리의 공격이 false positive를 일으키지 않는다는 것을 확인했습니다.
최종 스트레스 테스트로, RMSNorm을 사용하는 모든 오픈 소스 언어 모델에는 바이어스 항(Biderman, 2024)이 사용되지 않는다는 것을 발견했습니다. 따라서 RMSNorm을 사용하지만 바이어스가 있는 모델에 적용했을 때 공격이 오탐을 일으키지 않는지 확인했습니다.