* _Fine-tuning with Real-world Datasets_. Inaddition to building datasets based on human or LLM annotation, directly using real-world datasets to fine-tune the agent is also a common strategy. For example, in MIND2WEB [89], the authors collect a large amount of real-world datasets to enhance the agent capability in the web domain. In contrast to prior studies, the dataset presented in this paper encompasses diverse tasks, real-world scenarios, and comprehensive user interaction patterns. Specifically, the authors collect over 2,000 open-ended tasks from 137 real-world websites spanning 31 domains. Using this dataset, the authors fine-tune LLMs to enhance their performance on web-related tasks, including movie discovery and ticket booking, among others. In SQL-PALM [90], researchers fine-tune PaLM-2 based on a cross-domain large-scale text-to-SQL dataset called Spider. The obtained model can achieve significant performance improvement on text-to-SQL tasks.
* _실제 데이터 세트를 사용한 Fine-tuning_. 인간 또는 LLM 주석을 기반으로 데이터 세트를 구축하는 것 외에도 실제 데이터 세트를 직접 사용하여 에이전트를 Fine-tuning하는 것도 일반적인 전략입니다. 예를 들어, MIND2WEB [89]에서 저자들은 웹 도메인에서 에이전트 기능을 향상시키기 위해 대량의 실제 데이터 세트를 수집합니다. 이전 연구와 달리, 이 논문에서 제시된 데이터 세트는 다양한 작업, 실제 시나리오 및 포괄적인 사용자 상호 작용 패턴을 포괄합니다. 구체적으로, 저자들은 31개의 도메인에 걸쳐 137개의 실제 웹사이트에서 2,000개 이상의 개방형 태스크를 수집했습니다. 이 데이터 세트를 사용하여 저자들은 영화 검색 및 티켓 예약 등 웹 관련 작업의 성능을 향상시키기 위해 LLM을 Fine-tuning합니다. SQL-PALM [90]에서는 연구자들이 Spider라는 교차 도메인 대규모 텍스트-SQL 데이터 세트를 기반으로 PaLM-2를 Fine-tuning합니다. 얻은 모델은 텍스트-SQL 작업에서 상당한 성능 향상을 달성할 수 있습니다.
* _실제 데이터 세트를 사용한 미세 조정_. 인간 또는 LLM 주석을 기반으로 데이터 세트를 구축하는 것 외에도 실제 데이터 세트를 직접 사용하여 에이전트를 미세 조정하는 것도 일반적인 전략입니다. 예를 들어, MIND2WEB [89]에서 저자들은 웹 도메인에서 에이전트 기능을 향상시키기 위해 대량의 실제 데이터 세트를 수집합니다. 이전 연구와 달리, 이 논문에서 제시된 데이터 세트는 다양한 작업, 실제 시나리오 및 포괄적인 사용자 상호 작용 패턴을 포괄합니다. 구체적으로, 저자들은 31개의 도메인에 걸쳐 137개의 실제 웹사이트에서 2,000개 이상의 개방형 태스크를 수집했습니다. 이 데이터 세트를 사용하여 저자들은 영화 검색 및 티켓 예약 등 웹 관련 작업의 성능을 향상시키기 위해 LLM을 미세 조정합니다. SQL-PALM [90]에서는 연구자들이 Spider라는 교차 도메인 대규모 텍스트-SQL 데이터 세트를 기반으로 PaLM-2를 미세 조정합니다. 얻은 모델은 텍스트-SQL 작업에서 상당한 성능 향상을 달성할 수 있습니다.