가천대·부산대 공동연구팀, 자동채점 가능 ‘CPX 연습 챗봇’ 개발

[가천대 제공]


[헤럴드경제(성남)=박정규 기자]가천대(총장 이길여) 한의학과 김창업 교수, 부산대학교 김지환 교수 공동연구팀이 인공지능(AI), 거대언어모델(LLM) 기반의 혁신적인 한의학 임상수행평가((Clinical Performance Examination, CPX) 학습 시스템을 개발했다.

시스템은 AI가 표준화 환자 역할(실제로 건강한 사람이지만 환자처럼 행동할 수 있게 훈련받은 사람)을 수행하면서 동시에 학생의 진료 과정을 정량적으로 채점하고, 맞춤형 피드백까지 자동 제공한다.

연구팀은 채점과 피드백 생성에 각각 다른 AI 모델을 최적화해 활용했다. 연구결과 정량적 채점은 Claude-3.5-Sonnet 모델이 담당해 100%의 정확도와 평균 43.2초의 처리속도를 보였다. 피드백 생성은 GPT-4o가 구체적인 초안을 작성하고 Claude-3.5-Sonnet이 자연스러운 한국어로 다듬는 이중 구조를 도입해 두 모델의 장점을 활용했다.

시스템은 웹 기반으로 구현되어 있어 학생들이 시간과 장소에 구애받지 않고 실습이 가능하다. QR코드를 통해 즉시 접속할 수 있으며, 실습 후에는 정량적 점수와 함께 개선점에 대한 상세한 피드백을 받을 수 있다. 특히 기존 CPX 교육에서 문제가 되었던 평가자 부족과 즉각적 피드백 제공의 한계를 AI 기술로 해결했다는 점에서 의미가 크다.

연구팀은 미래 확장성을 고려한 표준 프레임워크도 제시했다. 이는 새롭게 개발되는 AI 모델이나 다양한 임상 시나리오를 체계적으로 평가하고 적용할 수 있는 개발 파이프라인으로, 시스템의 지속적인 발전을 가능하게 한다. 빠르게 발전하는 AI 기술을 의료 교육에 효과적으로 접목할 수 있는 방법론을 제시했다는 점에서도 주목받고 있다.

김창업 교수는 “이 프레임워크는 한의학을 넘어 의학, 치의학, 간호학 등 다양한 의료 교육 분야에 적용할 수 있다” 며 “앞으로 음성 인식, 영상 분석 등 새로운 기술을 도입해 더욱 실감나는 실습 환경을 구현할 계획”이라고 말했다.

이 연구는 한국연구재단의 지원을 받아 수행되었으며, 김창업교수 연구실 소속 가천대 한의학과 김준동 박사과정생은 이번 연구결과를 지난 9월 29일 열린 ‘2024 국제침술협의회(ICMART) 국제학회’에서 발표해 우수포스터상을 받았다. 또한 연구 결과는 지난 1일 대한한의학회지 제45권 제4호에 게재됐다.

Print Friendly