Table 2 demonstrates the decline of multilingual capabilities when deactivating language-specific neurons. Although just deactivating around \(0.13\%\) neurons, LLMs lose multilingual capabilities including understanding multilingual inputs, handling multilingual questions, and generating multilingual outputs. In contrast, deactivating the same number of randomly selected neurons does not yield any difference. Therefore, the detected neurons are language-specific and related to handling corresponding multilingual inputs.
Table 2는 언어별 뉴런을 비활성화할 때 다국어 능력이 감소하는 것을 보여줍니다. 약 \(0.13\%\)의 뉴런만 비활성화해도, LLM은 다국어 입력을 이해하고, 다국어 질문을 처리하며, 다국어 출력을 생성하는 능력을 잃습니다. 반면, 무작위로 선택된 동일한 수의 뉴런을 비활성화하는 경우에는 아무런 차이가 나타나지 않습니다. 따라서 감지된 뉴런은 언어별로 특화되어 있으며, 해당 다국어 입력을 처리하는 것과 관련이 있습니다.
표 2는 언어별 뉴런을 비활성화할 때 다국어 기능이 저하되는 것을 보여줍니다. 약 0.13\%\)의 뉴런만 비활성화해도 LLM은 다국어 입력 이해, 다국어 질문 처리, 다국어 출력 생성 등 다국어 기능을 상실합니다. 반면에 무작위로 선택된 동일한 수의 뉴런을 비활성화해도 차이가 없습니다. 따라서 감지된 뉴런은 언어별이며 해당 다국어 입력 처리와 관련이 있습니다.