**Diagnostic Performance.** The differential diagnoses provided by AMIE were more accurate and complete than those provided by board-certified PCPs, when both were evaluated by specialist physicians. Previous research has shown that AI systems may match or exceed human diagnostic performance in specific, narrow tasks [69, 70, 71] in retrospective evaluation. However, these situations typically involved both AI and physicians interpreting the same fixed input (for example, identifying the presence of a specific finding in a medical image). Our study was significantly more challenging because it required the AI system to actively acquire relevant information through conversation rather than relying on clinical information collated by human efforts [72]. Therefore the system's downstream differential diagnoses depended on not only its diagnostic inference capability, but also the quality of information gathered under uncertainty through natural conversation and building rapport.
**진단 성능.** 전문의들이 평가했을 때, AMIE가 제공한 감별 진단은 보드 인증 PCPs가 제공한 것보다 더 정확하고 완전했습니다. 이전 연구에서는 AI 시스템이 특정하고 좁은 과제에서 인간의 진단 성능과 일치하거나 이를 초과할 수 있음을 보여주었습니다 [69, 70, 71]. 그러나 이러한 상황은 일반적으로 AI와 의사가 동일한 고정된 입력을 해석하는 경우(예: 의료 이미지에서 특정 소견의 존재를 식별하는 경우)를 포함했습니다. 우리의 연구는 훨씬 더 도전적이었는데, 이는 AI 시스템이 인간의 노력으로 수집된 임상 정보에 의존하는 대신 대화를 통해 관련 정보를 적극적으로 획득해야 했기 때문입니다 [72]. 따라서 시스템의 하위 감별 진단은 진단 추론 능력뿐만 아니라 자연스러운 대화를 통해 불확실한 상황에서 수집된 정보의 품질에도 의존했습니다.
**진단 성능**. 전문의의 평가 결과, AMIE가 제공한 감별 진단은 이사회 인증을 받은 PCP가 제공한 감별 진단보다 더 정확하고 완전했습니다. 이전 연구에 따르면 AI 시스템은 소급 평가에서 특정한 좁은 작업 [69, 70, 71]에서 인간의 진단 성능과 일치하거나 초과할 수 있다고 합니다. 그러나 이러한 상황은 일반적으로 AI와 의사가 동일한 고정된 입력(예: 의료 이미지에서 특정 소견의 존재 여부 파악)을 해석하는 경우였습니다. 이 연구는 AI 시스템이 인간의 노력으로 수집된 임상 정보에 의존하기보다는 대화를 통해 적극적으로 관련 정보를 획득해야 하므로 훨씬 더 어려웠습니다. 따라서 시스템의 다운스트림 감별 진단은 진단 추론 능력뿐만 아니라 자연스러운 대화와 관계 구축을 통해 불확실성 하에서 수집된 정보의 품질에 따라 달라졌습니다.