가천대·부산대 공동연구팀, 자동채점 가능한 LLM 기반 ‘CPX 연습 챗봇’ 개발

실시간 키워드

2022.08.01 00:00 기준

가천대·부산대 공동연구팀, 자동채점 가능한 LLM 기반 ‘CPX 연습 챗봇’ 개발

한국대학신문 2024-12-13 09:03:26 신고

3줄요약

[한국대학신문 이정환 기자] 가천대학교(총장 이길여) 한의학과 김창업 교수, 부산대학교 김지환 교수 공동연구팀이 인공지능(AI), 거대언어모델(LLM) 기반의 혁신적인 한의학 임상수행평가((Clinical Performance Examination, CPX) 학습 시스템을 개발했다.

왼쪽부터 가천대 한의학과 김창업 교수, 가천대 한의학과 김준동 박사과정생, 부산대 김지환 교수.

시스템은 AI가 표준화 환자 역할(실제로 건강한 사람이지만 환자처럼 행동할 수 있게 훈련받은 사람)을 수행하면서 동시에 학생의 진료 과정을 정량적으로 채점하고, 맞춤형 피드백까지 자동 제공한다.

연구팀은 채점과 피드백 생성에 각각 다른 AI 모델을 최적화해 활용했다. 연구결과 정량적 채점은 Claude-3.5-Sonnet 모델이 담당해 100%의 정확도와 평균 43.2초의 처리속도를 보였다. 피드백 생성은 GPT-4o가 구체적인 초안을 작성하고 Claude-3.5-Sonnet이 자연스러운 한국어로 다듬는 이중 구조를 도입해 두 모델의 장점을 활용했다.

시스템은 웹 기반으로 구현돼 학생들이 시간과 장소에 구애받지 않고 실습이 가능하다. QR코드를 통해 즉시 접속할 수 있으며, 실습 후에는 정량적 점수와 함께 개선점에 대한 상세한 피드백을 받을 수 있다. 특히 기존 CPX 교육에서 문제가 되었던 평가자 부족과 즉각적 피드백 제공의 한계를 AI 기술로 해결했다는 점에서 의미가 크다.

또한 연구팀은 미래 확장성을 고려한 표준 프레임워크도 제시했다. 이는 새롭게 개발되는 AI 모델이나 다양한 임상 시나리오를 체계적으로 평가하고 적용할 수 있는 개발 파이프라인으로, 시스템의 지속적인 발전을 가능하게 한다. 빠르게 발전하는 AI 기술을 의료 교육에 효과적으로 접목할 수 있는 방법론을 제시했다는 점에서도 주목받고 있다.

김창업 교수는 “이 프레임워크는 한의학을 넘어 의학, 치의학, 간호학 등 다양한 의료 교육 분야에 적용할 수 있다” 며 “앞으로 음성 인식, 영상 분석 등 새로운 기술을 도입해 더욱 실감나는 실습 환경을 구현할 계획”이라고 말했다.

이 연구는 한국연구재단의 지원을 받아 수행됐으며, 김창업교수 연구실 소속 가천대 한의학과 김준동 박사과정생은 이번 연구결과를 지난 9월 29일 열린 ‘2024 국제침술협의회(ICMART) 국제학회’에서 발표해 우수포스터상을 받았다. 또한 연구 결과는 지난 1일 대한한의학회지 제45권 제4호에 게재됐다.

Copyright ⓒ 한국대학신문 무단 전재 및 재배포 금지

본 콘텐츠는 뉴스픽 파트너스에서 공유된 콘텐츠입니다.

다음 내용이 궁금하다면?
광고 보고 계속 읽기
원치 않을 경우 뒤로가기를 눌러주세요

실시간 키워드

  1. -
  2. -
  3. -
  4. -
  5. -
  6. -
  7. -
  8. -
  9. -
  10. -

0000.00.00 00:00 기준

이 시각 주요뉴스

알림 문구가 한줄로 들어가는 영역입니다

신고하기

작성 아이디가 들어갑니다

내용 내용이 최대 두 줄로 노출됩니다

신고 사유를 선택하세요

이 이야기를
공유하세요

이 콘텐츠를 공유하세요.

콘텐츠 공유하고 수익 받는 방법이 궁금하다면👋>
주소가 복사되었습니다.
유튜브로 이동하여 공유해 주세요.
유튜브 활용 방법 알아보기