We conducted experiments to determine if the chat vector could enable models to detect and counter certain instruction-based attacks. For this, 1000 samples were randomly selected from the Role Play Instruction field of the Safety Prompts dataset and evaluated our Traditional Chinese LLaMA. The performance of our models under different fields in attack scenarios remains an ongoing area of our investigation.
채팅 벡터가 모델이 특정 Instruction 기반 공격을 탐지하고 대응할 수 있도록 하는지 확인하기 위해 실험을 수행했습니다. 이를 위해 Safety Prompts 데이터 세트의 Role Play Instruction 필드에서 1000개의 샘플을 무작위로 선택하여 Traditional Chinese LLaMA를 평가했습니다. 공격 시나리오에서 다양한 필드에서 모델의 성능은 현재 조사 중인 분야입니다.
채팅 벡터가 모델이 특정 명령어 기반 공격을 탐지하고 대응할 수 있도록 하는지 확인하기 위해 실험을 수행했습니다. 이를 위해 안전 프롬프트 데이터 세트의 역할 플레이 명령어 필드에서 1000개의 샘플을 무작위로 선택하여 중국어 LLaMA를 평가했습니다. 공격 시나리오에서 다양한 필드에서 모델의 성능은 현재 조사 중인 분야입니다.