There is moderate evidence of the latent multi-hop reasoning, which sometimes becomes stronger with increasing model size.Figure 5 shows the relative frequency of the four cases, where green, blue, yellow, and red represent each of the cases of SS, FS, SF, and FF, respectively. LLaMA-2 7B exhibits a relative frequency for successful multi-hop reasoning (green) above random chance (0.25), peaking at 0.46 (entity substitution) and 0.38 (relation substitution). The likelihood of partial multi-hop reasoning (green + blue + yellow) exceeds 0.8 in later layers.
잠재적인 다중 홉 추론에 대한 중간 정도의 증거가 있으며, 이는 모델 크기가 커질수록 더 강해지는 경우가 있습니다. Figure 5는 네 가지 경우의 상대적 빈도를 보여 주며, 녹색, 파란색, 노란색, 빨간색은 각각 SS, FS, SF, FF의 경우를 나타냅니다. LLaMA-2 7B는 성공적인 다중 홉 추론(녹색)의 상대적 빈도가 무작위 확률(0.25) 이상으로 나타나며, 0.46(entity substitution)과 0.38(relation substitution)에서 최고조에 달합니다. 부분적인 다중 홉 추론(녹색 + 파란색 + 노란색)의 가능성은 후반 layer에서 0.8을 초과합니다.
잠재적인 다중 홉 추론에 대한 중간 정도의 증거가 있으며, 이는 모델 크기가 커질수록 더 강해지는 경우가 있습니다.그림 5는 네 가지 경우의 상대적 빈도를 보여 주며, 녹색, 파란색, 노란색, 빨간색은 각각 SS, FS, SF, FF의 경우를 나타냅니다. LLaMA-2 7B는 성공적인 다중 홉 추론(녹색)의 상대적 빈도가 무작위 확률(0.25) 이상으로 나타나며, 0.46(엔티티 대체)과 0.38(관계 대체)에서 최고조에 달합니다. 부분적인 다중 홉 추론(녹색 + 파란색 + 노란색)의 가능성은 후반 레이어에서 0.8을 초과합니다.