MRKL Karpas et al. (2022) introduces a novel framework comprising scalable modules (referred to as experts) and a router. These experts can take the form of neural networks or symbols. However, this study primarily focuses on conceptualization and training an LLM specifically for mathematical computation while not delving into implementing other module contents. TALM Parisi et al. (2022) and Toolformer Schick et al. (2023) integrate a text-centric methodology with supplementary tools to enhance the capabilities of language models. They employ a self-supervise mechanism to initiate performance enhancements, commencing with a limited set of tooltips. In a similar vein, HuggingGPT Shen et al. (2023) leverages visual and speech models to process information from diverse modalities, thereby endowing LLMs with the capacity for multi-modal understanding and generation. Another question is how to select the appropriate tool. LATM Cai et al. (2023) enables the tool-making ability of LLMs to make generalized API across different tasks, and GEAR Lu et al. (2023) considers the efficiency of tool-using by using smaller models to delegate tool grounding and execution.
MRKL Karpas 등(2022)은 확장 가능한 모듈(전문가라고 함)과 라우터로 구성된 새로운 프레임워크를 소개합니다. 이러한 전문가는 신경망이나 기호의 형태를 취할 수 있습니다. 그러나 이 연구는 주로 수학적 계산을 위해 Large Language Models (LLMs)을 구상하고 훈련하는 데 초점을 맞추고 있으며, 다른 모듈 내용의 구현은 다루지 않습니다. TALM Parisi et al. (2022)과 Toolformer Schick et al. (2023)은 텍스트 중심 방법론과 보조 도구를 통합하여 언어 모델의 기능을 향상시킵니다. 이들은 self-supervise 메커니즘을 사용하여 제한된 툴팁 세트에서 시작하여 성능 향상을 시작합니다. 비슷한 맥락에서 HuggingGPT Shen et al. (2023)은 다양한 방식의 정보를 처리하기 위해 시각 및 음성 모델을 활용하여 LLM이 다중 방식 이해 및 생성 능력을 갖추도록 합니다. 또 다른 질문은 적절한 도구를 선택하는 방법입니다. LATM Cai et al. (2023)은 LLM의 도구 제작 기능을 활용하여 다양한 작업에 걸쳐 일반화된 API를 만들 수 있도록 지원하며, GEAR Lu et al. (2023)은 더 작은 모델을 사용하여 도구 접지 및 실행을 위임함으로써 도구 사용의 효율성을 고려합니다.
MRKL Karpas 등(2022)은 확장 가능한 모듈(전문가라고 함)과 라우터로 구성된 새로운 프레임워크를 소개합니다. 이러한 전문가는 신경망이나 기호의 형태를 취할 수 있습니다. 그러나 이 연구는 주로 수학적 계산을 위해 LLM을 구상하고 훈련하는 데 초점을 맞추고 있으며, 다른 모듈 내용의 구현은 다루지 않습니다. TALM Parisi et al. (2022)과 Toolformer Schick et al. (2023)은 텍스트 중심 방법론과 보조 도구를 통합하여 언어 모델의 기능을 향상시킵니다. 이들은 자가 감독 메커니즘을 사용하여 제한된 툴팁 세트에서 시작하여 성능 향상을 시작합니다. 비슷한 맥락에서 HuggingGPT Shen et al. (2023)은 다양한 방식의 정보를 처리하기 위해 시각 및 음성 모델을 활용하여 LLM이 다중 방식 이해 및 생성 능력을 갖추도록 합니다. 또 다른 질문은 적절한 도구를 선택하는 방법입니다. LATM Cai et al. (2023)은 LLM의 도구 제작 기능을 활용하여 다양한 작업에 걸쳐 일반화된 API를 만들 수 있도록 지원하며, GEAR Lu et al. (2023)은 더 작은 모델을 사용하여 도구 접지 및 실행을 위임함으로써 도구 사용의 효율성을 고려합니다.