The majority of explorations of AI as tools for conducting medical consultations have focused on "symptom checker" applications rather than a full natural dialogue, or on topics such as transcription of medical audio or the generation of plausible dialogue given clinical notes or summaries [60, 61, 62, 63]. Language models have been trained using clinical dialogue datasets but not comprehensively evaluated [64]. Studies have been grounded in messages between doctors and patients in commercial chat platforms (which may have altered doctor-patient engagement compared to 1:1 medical consultations) [65, 28, 66]. Many focused largely on predicting next turns in the recorded exchanges rather than clinically meaningful metrics. And to date, there have been no reported studies that have examined the quality of AI models for diagnostic dialogue using the same criteria that are used to examine and train human physicians in dialogue and communication skills; nor evaluating AI systems in common frameworks such as the OSCE.
의료 상담을 수행하기 위한 도구로서의 AI를 탐구하는 대부분의 연구는 완전한 자연어 대화보다는 '증상 확인기' 애플리케이션에 초점을 맞추거나 의료용 오디오 전사 또는 임상 노트 또는 요약을 감안하여 그럴듯한 대화를 생성하는 등의 주제에 초점을 맞추고 있습니다 [60, 61, 62, 63]. 임상 대화 데이터 세트를 사용하여 Language Models를 학습시켰지만 종합적으로 평가하지는 않았습니다 [64]. 연구는 상업용 채팅 플랫폼에서 의사와 환자 간의 메시지에 기반을 두고 있습니다(1:1 의료 상담과 비교하여 의사-환자 참여가 달라질 수 있음) [65, 28, 66]. 대부분 임상적으로 의미 있는 지표보다는 기록된 대화에서 다음 턴을 예측하는 데 중점을 두었습니다. 현재까지 인간 의사의 대화 및 커뮤니케이션 기술을 검토하고 훈련하는 데 사용되는 것과 동일한 기준을 사용하여 진단 대화를 위한 AI 모델의 품질을 조사한 연구는 보고되지 않았으며, OSCE와 같은 일반적인 프레임워크에서 AI 시스템을 평가한 연구도 없습니다.
의료 상담을 수행하기 위한 도구로서의 AI를 탐구하는 대부분의 연구는 완전한 자연어 대화보다는 '증상 확인기' 애플리케이션에 초점을 맞추거나 의료용 오디오 전사 또는 임상 노트 또는 요약을 감안하여 그럴듯한 대화를 생성하는 등의 주제에 초점을 맞추고 있습니다 [60, 61, 62, 63]. 임상 대화 데이터 세트를 사용하여 언어 모델을 학습시켰지만 종합적으로 평가하지는 않았습니다 [64]. 연구는 상업용 채팅 플랫폼에서 의사와 환자 간의 메시지에 기반을 두고 있습니다(1:1 의료 상담과 비교하여 의사-환자 참여가 달라질 수 있음) [65, 28, 66]. 대부분 임상적으로 의미 있는 지표보다는 기록된 대화에서 다음 턴을 예측하는 데 중점을 두었습니다. 현재까지 인간 의사의 대화 및 커뮤니케이션 기술을 검토하고 훈련하는 데 사용되는 것과 동일한 기준을 사용하여 진단 대화를 위한 AI 모델의 품질을 조사한 연구는 보고되지 않았으며, OSCE와 같은 일반적인 프레임워크에서 AI 시스템을 평가한 연구도 없습니다.