English. On the contrary, when we only deactivate language-specific neurons not in the task-solving layer, non-English is influenced more seriously than English. Moreover, eliminating interference from the feed-forward layer achieves better results, which verifies the function of attention structure in the task-solving layer.
English. 반대로 과제 해결 레이어가 아닌 언어별 뉴런만 비활성화하면 영어보다 비영어가 더 심각하게 영향을 받습니다. 또한 feed-forward layer의 간섭을 제거하면 더 나은 결과를 얻을 수 있으며, 이는 과제 해결 레이어에서 attention 구조의 기능을 검증합니다.
English. 반대로 과제 해결 레이어가 아닌 언어별 뉴런만 비활성화하면 영어보다 비영어가 더 심각하게 영향을 받습니다. 또한 피드 포워드 레이어의 간섭을 제거하면 더 나은 결과를 얻을 수 있으며, 이는 과제 해결 레이어에서 주의 구조의 기능을 검증합니다.