Lu et al. (2023) introduces multilingual dictionaries in prompts to enhance machine translation. Li et al. (2023) proposes chain-of-knowledge (CoK-Li), which obtains structured knowledge from a knowledge base via a query generator to perform knowledge-guided reasoning. Wang et al. (2023) (CoK-Wang) also retrieves structured knowledge from KB. Moreover, it estimates the reasoning chains in terms of factuality and faithfulness and prompts models to rethink unreliable reasonings, which mitigates the knowledge retrieval errors in CoK-Li. KD-CoT Wang et al. (2023) addresses factual reasoning problems through a multi-turn QA approach. They design a feedback-augmented retriever for retrieving relevant external knowledge in each round of QA to calibrate the reasoning process. Other studies use the model's own memory as external knowledge. For example, Memory-of-Thought Li and Qiu (2023) first performs pre-thinking to save the high-confidence thoughts into external memory, and during inference, it lets the LLM recall relevant memory to aid reasoning.
Lu et al.(2023)은 기계 번역을 향상시키기 위해 prompts에 다국어 사전을 도입합니다. Li et al. (2023)은 쿼리 생성기를 통해 지식 베이스에서 구조화된 지식을 획득하여 지식 기반 추론을 수행하는 Chain-of-Knowledge(CoK-Li)를 제안합니다. Wang et al. (2023)(CoK-Wang)도 KB에서 구조화된 지식을 검색합니다. 또한 사실성과 충실성 측면에서 추론 사슬을 추정하고 모델이 신뢰할 수 없는 추론을 다시 생각하도록 prompts하여 CoK-Li의 지식 검색 오류를 완화합니다. KD-CoT Wang et al. (2023)은 다중 턴 QA 접근 방식을 통해 사실 추론 문제를 해결합니다. 이들은 QA의 각 라운드에서 관련 외부 지식을 검색하기 위해 feedback-augmented retriever를 설계하여 추론 과정을 보정합니다. 다른 연구에서는 모델 자체의 메모리를 외부 지식으로 사용합니다. 예를 들어, Memory-of-Thought Li and Qiu (2023)는 먼저 사전 생각을 수행하여 신뢰도가 높은 생각을 외부 메모리에 저장하고, 추론 중에 LLM이 관련 메모리를 불러오도록 하여 추론을 지원합니다.
Lu et al.(2023)은 기계 번역을 향상시키기 위해 프롬프트에 다국어 사전을 도입합니다. Li et al. (2023)은 쿼리 생성기를 통해 지식 베이스에서 구조화된 지식을 획득하여 지식 기반 추론을 수행하는 Chain-of-Knowledge(CoK-Li)를 제안합니다. Wang et al. (2023)(CoK-Wang)도 KB에서 구조화된 지식을 검색합니다. 또한 사실성과 충실성 측면에서 추론 사슬을 추정하고 모델이 신뢰할 수 없는 추론을 다시 생각하도록 프롬프트하여 CoK-Li의 지식 검색 오류를 완화합니다. KD-CoT Wang et al. (2023)은 다중 턴 QA 접근 방식을 통해 사실 추론 문제를 해결합니다. 이들은 QA의 각 라운드에서 관련 외부 지식을 검색하기 위해 피드백 증강 검색기를 설계하여 추론 과정을 보정합니다. 다른 연구에서는 모델 자체의 메모리를 외부 지식으로 사용합니다. 예를 들어, Memory-of-Thought Li and Qiu (2023)는 먼저 사전 생각을 수행하여 신뢰도가 높은 생각을 외부 메모리에 저장하고, 추론 중에 LLM이 관련 메모리를 불러오도록 하여 추론을 지원합니다.