Explicit MethodsFacts-as-Experts (Verga et al., 2021) store representations of entities in the form of key-value pairs into external memory that can be modified during inference time. RAG (Lewis et al., 2020) accesses a dense vector index of Wikipedia with a retriever and swaps indexes for updating the behavior of the model as the world changes. Blender Bot 2.0 (Xu et al., 2021; Komeili et al., 2021), is also one of the explicit methods that search the internet for recent knowledge and saves recent conversations in external long-term memory. Explicit methods, such as swapping indexes, adding explicit entity-relation knowledge, or searching the internet are in need of manual intervention during inference or are bound to tasks that require retrieval. In this paper, we focus only on implicit methods.
명시적 방법Facts-as-Experts(Verga et al., 2021)는 추론 시간 동안 수정할 수 있는 외부 메모리에 엔티티의 표현을 key-value 쌍 형태로 저장합니다. RAG(Lewis et al., 2020)는 retriever를 통해 위키피디아의 고밀도 벡터 인덱스에 액세스하고, 세상이 변화함에 따라 모델의 동작을 업데이트하기 위해 인덱스를 교체합니다. Blender Bot 2.0(Xu et al., 2021; Komeili et al., 2021)도 최근 지식을 위해 인터넷을 검색하고 최근 대화를 외부 장기 기억에 저장하는 명시적 방법 중 하나입니다. 인덱스 교체, 명시적 개체-관계 지식 추가 또는 인터넷 검색과 같은 명시적 방법은 추론 중에 수동 개입이 필요하거나 검색이 필요한 작업에 국한됩니다. 이 논문에서는 암시적 방법에만 초점을 맞추고 있습니다.
명시적 방법Facts-as-Experts(Verga et al., 2021)는 추론 시간 동안 수정할 수 있는 외부 메모리에 엔티티의 표현을 키-값 쌍 형태로 저장합니다. RAG(Lewis et al., 2020)는 리트리버를 통해 위키피디아의 고밀도 벡터 인덱스에 액세스하고, 세상이 변화함에 따라 모델의 동작을 업데이트하기 위해 인덱스를 교체합니다. Blender Bot 2.0(Xu et al., 2021; 코멜리 et al., 2021)도 최근 지식을 위해 인터넷을 검색하고 최근 대화를 외부 장기 기억에 저장하는 명시적 방법 중 하나입니다. 인덱스 교체, 명시적 개체-관계 지식 추가 또는 인터넷 검색과 같은 명시적 방법은 추론 중에 수동 개입이 필요하거나 검색이 필요한 작업에 국한됩니다. 이 논문에서는 암시적 방법에만 초점을 맞추고 있습니다.