AutoGPT+P starts by using an image of a scene to detect the objects present. A language model then uses those objects to select which tool to use, from four options: Plan Tool, Partial Plan Tool, Suggest Alternative Tool, and Explore Tool. These tools allow the robot to not only generate a full plan to complete the goal, but also to explore the environment, make assumptions, and create partial plans.
AutoGPT+P는 먼저 장면의 이미지를 사용하여 존재하는 물체를 감지합니다. 그런 다음 언어 모델은 이러한 객체를 사용하여 네 가지 옵션 중에서 어떤 도구를 사용할지 선택합니다: Plan Tool, Partial Plan Tool, Suggest Alternative Tool, 그리고 Explore Tool. 이러한 도구를 통해 로봇은 목표를 완료하기 위한 전체 계획을 생성할 뿐만 아니라 환경을 탐색하고 가정을 세우고 부분적인 계획을 세울 수 있습니다.
AutoGPT+P는 먼저 장면의 이미지를 사용하여 존재하는 물체를 감지합니다. 그런 다음 언어 모델은 이러한 객체를 사용하여 네 가지 옵션 중에서 어떤 도구를 사용할지 선택합니다: 계획 도구, 부분 계획 도구, 대체 도구 제안, 탐색 도구. 이러한 도구를 통해 로봇은 목표를 완료하기 위한 전체 계획을 생성할 뿐만 아니라 환경을 탐색하고 가정을 세우고 부분적인 계획을 세울 수 있습니다.