\(\bullet\)_Task recognition._ In the first way, LLMs recognize the task from demonstrations and utilize the prior knowledge obtained from pre-training to solve new test tasks. A Probably Approximately Correct (PAC) framework [494] has been proposed to assess the learnability of ICL. It assumes that there exists a latent variable representing the task in the pre-training data, and LLMs have been shown to be capable of capturing this variable from demonstrations, enabling them to recognize the task in ICL. Also, the interpretation of ICL as task recognition is supported by several empirical studies [478, 495]. For example, it has been observed that replacing the inputs or labels of demonstrations with random ones sampled from the input or label space does not seriously hurt the performance of LLMs, indicating that LLMs mainly recognize the target task from demonstrations instead of learning from them [478, 493]. Similarly, LLMs can exhibit decent performance even if the prompt template is irrelevant or misleading [495].
\(\bullet\)_작업 인식._ 첫 번째 방법에서는 LLM이 시연에서 작업을 인식하고 사전 학습에서 얻은 사전 지식을 활용하여 새로운 테스트 작업을 해결합니다. ICL의 학습 가능성을 평가하기 위해 아마도 대략적으로 정확한 (PAC) 프레임워크 [494]가 제안되었습니다. 이는 사전 학습 데이터에 작업을 나타내는 잠재 변수가 존재한다고 가정하며, LLM이 시연에서 이 변수를 포착하여 ICL에서 작업을 인식할 수 있음을 보여주었습니다. 또한, ICL을 작업 인식으로 해석하는 것은 여러 실증 연구 [478, 495]에 의해 뒷받침됩니다. 예를 들어, 시연의 입력이나 레이블을 입력 또는 레이블 공간에서 무작위로 샘플링한 것으로 대체해도 LLM의 성능에 큰 영향을 미치지 않는다는 관찰이 있었으며, 이는 LLM이 시연에서 학습하기보다는 주로 대상 작업을 인식한다는 것을 나타냅니다 [478, 493]. 마찬가지로, 프롬프트 템플릿이 관련이 없거나 오해의 소지가 있어도 LLM은 괜찮은 성능을 보일 수 있습니다 [495].
\(\bullet\)_작업 인식._ 첫 번째 방법은 LLM이 데모에서 작업을 인식하고 사전 학습을 통해 얻은 사전 지식을 활용하여 새로운 테스트 작업을 해결하는 것입니다. ICL의 학습 가능성을 평가하기 위해 PAC(아마도 대략적으로 정확한) 프레임워크[494]가 제안되었습니다. 이 프레임워크는 사전 학습 데이터에 작업을 나타내는 잠재 변수가 존재한다고 가정하고, LLM이 데모에서 이 변수를 캡처할 수 있도록 하여 ICL에서 작업을 인식할 수 있도록 합니다. 또한 ICL을 작업 인식으로 해석하는 것은 여러 실증 연구[478, 495]에 의해 뒷받침됩니다. 예를 들어, 데모의 입력 또는 레이블을 입력 또는 레이블 공간에서 샘플링한 임의의 것으로 대체해도 LLM의 성능이 크게 저하되지 않는 것으로 관찰되었는데, 이는 LLM이 데모에서 학습하는 대신 주로 데모에서 목표 작업을 인식한다는 것을 나타냅니다[478, 493]. 마찬가지로, 프롬프트 템플릿이 관련성이 없거나 오해의 소지가 있는 경우에도 LLM은 적절한 성능을 발휘할 수 있습니다[495].