We initially randomly sampled 500 drug information pages from UpToDate.com, a medical reference website widely used by clinicians. To constrain the scope of questions, we specify in the prompt that the answer must be numerical and in milligrams. To filter out generated questions that did not meet the specified criteria (e.g. ambiguous question, incorrect units, etc.), we perform an additional quality control step, where we ask GPT-4 to verify that the generated question fulfills all criteria. After this step, we have 266 question-answer pairs.
처음에 우리는 임의로 UpToDate.com에서 500개의 약물 정보 페이지를 샘플링했습니다. UpToDate.com은 임상의들이 널리 사용하는 의학 참고 웹사이트입니다. 질문의 범위를 제한하기 위해, 우리는 프롬프트에서 답변이 반드시 숫자여야 하며 밀리그램 단위여야 한다고 명시했습니다. 지정된 기준을 충족하지 않는 생성된 질문들(예: 모호한 질문, 잘못된 단위 등)을 걸러내기 위해, 우리는 추가적인 품질 관리 단계를 수행하여 GPT-4에게 생성된 질문이 모든 기준을 충족하는지 확인하도록 요청했습니다. 이 단계를 거친 후, 우리는 266개의 질문-답변 쌍을 얻었습니다.
임상의가 널리 사용하는 의학 참고 웹사이트인 UpToDate.com에서 약물 정보 페이지 500개를 무작위로 샘플링했습니다. 질문의 범위를 제한하기 위해 프롬프트에 답변이 숫자여야 하며 밀리그램 단위여야 한다고 명시합니다. 지정된 기준(예: 모호한 질문, 잘못된 단위 등)을 충족하지 않는 생성된 질문을 걸러내기 위해, 생성된 질문이 모든 기준을 충족하는지 GPT-4가 확인하도록 요청하는 추가 품질 관리 단계를 수행합니다. 이 단계를 거친 후 266개의 질문-답변 쌍을 확보했습니다.