FindingsLikewise, the deactivation of randomly selected neurons has a lesser impact compared to language-specific neurons, validating the efficiency of PLND in identifying neurons pertinent to a particular language. Targeted deactivation of language-specific neurons within the feed-forward structure of the task-solving layer predominantly affects non-English languages. This implies that processing multilingual queries necessitates accessing the multilingual information embedded within the relevant structures. However, disabling the self-attention structure compromises the ability to solve tasks across all languages.
발견마찬가지로 무작위로 선택된 뉴런의 비활성화는 언어별 뉴런에 비해 영향이 적어 특정 언어와 관련된 뉴런을 식별하는 PLND의 효율성을 검증합니다. 작업 풀이 계층의 feed-forward 구조 내에서 언어별 뉴런을 표적으로 비활성화하면 비영어 언어에 주로 영향을 미칩니다. 이는 다국어 쿼리를 처리하려면 관련 구조에 포함된 다국어 정보에 액세스해야 함을 의미합니다. 그러나 self-attention 구조를 비활성화하면 모든 언어에서 작업을 해결하는 기능이 손상됩니다.
발견마찬가지로 무작위로 선택된 뉴런의 비활성화는 언어별 뉴런에 비해 영향이 적어 특정 언어와 관련된 뉴런을 식별하는 PLND의 효율성을 검증합니다. 작업 풀이 계층의 피드 포워드 구조 내에서 언어별 뉴런을 표적으로 비활성화하면 비영어 언어에 주로 영향을 미칩니다. 이는 다국어 쿼리를 처리하려면 관련 구조에 포함된 다국어 정보에 액세스해야 함을 의미합니다. 그러나 자기 주의 구조를 비활성화하면 모든 언어에서 작업을 해결하는 기능이 손상됩니다.