FindingsSimilar to other tasks, the disabling of language-specific neurons within the generation layer attenuates their capacity to generate content in the respective languages. By selectively deactivating neurons that are not associated with English, we do not completely eliminate the models' multilingual generation abilities. However, as demonstrated in Table 2, the complete deactivation of all language-specific neurons results in the total loss of the LLMs' multilingual generation capabilities.
다른 작업과 유사하게, 생성 층 내의 언어 특정 뉴런을 비활성화하면 해당 언어로 콘텐츠를 생성하는 능력이 감소합니다. 영어와 관련이 없는 뉴런을 선택적으로 비활성화함으로써 모델의 다국어 생성 능력을 완전히 제거하지는 않습니다. 그러나 Table 2에서 보여주듯이, 모든 언어 특정 뉴런을 완전히 비활성화하면 LLM의 다국어 생성 능력이 완전히 상실됩니다.
발견다른 작업과 마찬가지로 생성 계층 내에서 언어별 뉴런을 비활성화하면 해당 언어로 콘텐츠를 생성하는 능력이 저하됩니다. 영어와 관련이 없는 뉴런을 선택적으로 비활성화함으로써 모델의 다국어 생성 기능을 완전히 제거하지는 않습니다. 그러나 표 2에서 볼 수 있듯이 모든 언어별 뉴런을 완전히 비활성화하면 LLM의 다국어 생성 기능이 완전히 손실됩니다.