Reasoning TaskDeactivation methods: (i) randomly sampled neurons in the attention structure of task-solving layer. (ii) randomly sampled neurons in the task-solving layer. (iii) randomly sampled neurons in the task-solving layer. (iii) randomly sampled neurons in all layers. (iv) language-specific neurons in the task-solving layer. (v) language-specific neurons in the understanding layer and generation layer. (vi) language-specific neurons not in the attention structure of task-solving layers.
추론 과제Deactivation 방법: (i) 과제 해결 계층의 attention 구조에서 무작위로 샘플링된 뉴런. (ii) 과제 해결 계층에서 무작위로 샘플링된 뉴런. (iii) 과제 해결 계층에서 무작위로 샘플링된 뉴런. (iii) 모든 계층에서 무작위로 샘플링된 뉴런. (iv) 과제 해결 계층의 언어별 뉴런. (v) 이해 계층 및 생성 계층의 언어별 뉴런. (vi) 과제 해결 계층의 attention 구조에 속하지 않는 언어별 뉴런.
추론 과제비활성화 방법: (i) 과제 해결 계층의 주의 구조에서 무작위로 샘플링된 뉴런. (ii) 과제 해결 계층에서 무작위로 샘플링된 뉴런. (iii) 과제 해결 계층에서 무작위로 샘플링된 뉴런. (iii) 모든 계층에서 무작위로 샘플링된 뉴런. (iv) 과제 해결 계층의 언어별 뉴런. (v) 이해 계층 및 생성 계층의 언어별 뉴런. (vi) 과제 해결 계층의 주의 구조에 속하지 않는 언어별 뉴런.