While RAISE significantly improves upon existing methods in some respects, the researchers also highlighted several issues. First, RAISE struggles to understand complex logic, limiting its usefulness in many scenarios. Additionally, RAISE agents often hallucinated with respect to their roles or knowledge. For example, a sales agent without a clearly defined role might retain the ability to code in Python, which may enable them to start writing Python code instead of focusing on their sales tasks. These agents might also give the user misleading or incorrect information. This problem was addressed by fine-tuning the model, but the researchers still highlighted hallucination as a limitation in the RAISE implementation.
RAISE는 몇 가지 측면에서 기존 방법을 크게 개선했지만, 연구자들은 몇 가지 문제점도 지적했습니다. 첫째, RAISE는 복잡한 논리를 이해하는 데 어려움을 겪기 때문에 많은 시나리오에서 그 유용성이 제한됩니다. 또한 RAISE 에이전트는 종종 역할이나 지식과 관련하여 hallucination을 일으켰습니다. 예를 들어, 역할이 명확하게 정의되지 않은 영업 상담원은 Python으로 코딩할 수 있는 능력을 유지하여 영업 업무에 집중하는 대신 Python 코드 작성을 시작할 수 있습니다. 이러한 상담원은 사용자에게 오해의 소지가 있거나 잘못된 정보를 제공할 수도 있습니다. 이 문제는 모델을 Fine-tuning하여 해결했지만, 연구진은 여전히 hallucination을 RAISE 구현의 한계로 지적했습니다.
RAISE는 몇 가지 측면에서 기존 방법을 크게 개선했지만, 연구자들은 몇 가지 문제점도 지적했습니다. 첫째, RAISE는 복잡한 논리를 이해하는 데 어려움을 겪기 때문에 많은 시나리오에서 그 유용성이 제한됩니다. 또한 RAISE 에이전트는 종종 역할이나 지식과 관련하여 환각을 일으켰습니다. 예를 들어, 역할이 명확하게 정의되지 않은 영업 상담원은 파이썬으로 코딩할 수 있는 능력을 유지하여 영업 업무에 집중하는 대신 파이썬 코드 작성을 시작할 수 있습니다. 이러한 상담원은 사용자에게 오해의 소지가 있거나 잘못된 정보를 제공할 수도 있습니다. 이 문제는 모델을 미세 조정하여 해결했지만, 연구진은 여전히 환각을 RAISE 구현의 한계로 지적했습니다.