인기 키워드 순위

    메디게이트 뉴스

    전문가는 '정확하다'고 본 챗GPT…환자 10명 중 2명만 필요한 정보 찾았다

    이만경 성균관대 교수, 의료 AI 연구 설계 제언…“환자·의료진이 답변을 어떻게 해석하고 활용하는지 봐야”

    기사입력시간 2026-11-17 07:45
    최종업데이트 2026-11-17 07:45

    16일 성균관대 삼성융합의과학원 이만경 교수가  ‘AI 의료기술 정책 세미나’에서 발표했다.

    [메디게이트뉴스 조운 기자] 전문가가 정확하다고 평가한 의료 인공지능(AI) 답변도 환자가 직접 질문하는 상황에서는 필요한 정보를 제공하지 못할 수 있다. 의료 AI의 임상적 가치를 판단하려면 모델의 정확도와 함께 환자와 의료진이 어떤 상황에서 AI를 쓰고, 답변을 어떻게 해석해 실제 판단과 행동에 옮기는지까지 살펴야 한다는 제언이 나왔다.

    성균관대 삼성융합의과학원 이만경 교수는 16일 한국보건의료연구원이 서울 코엑스에서 개최한 ‘AI 의료기술 정책 세미나’에서 “기술적 성능이 곧장 임상적 효과를 담보하지 않는다”며 이같이 밝혔다.

    전문가가 검토한 답변과 환자가 직접 받은 답변 사이 간극

    이 교수는 이화여대와 삼성서울병원·성균관대 연구진이 지난 8월 국제학술지 ‘사이언티픽 리포트(Scientific Reports)’에 발표한 만성폐쇄성폐질환(COPD) 환자의 챗GPT 활용 연구를 소개했다. 전문가 20명은 연구진이 사전에 마련한 폐재활 질문 19개에 대해 챗GPT-4o가 생성한 답변을 정확도, 가독성, 안전성, 전반적 품질에서 높게 평가했다.

    별도로 진행한 정보 검색 과제에서는 COPD 환자 10명 중 2명만 자신의 질환을 질문에 반영해 필요한 폐재활 정보를 찾았다. 이 교수는 연구진이 준비한 질문에 대한 답변을 두고 “의료진은 답변이 어렵지 않고 정확하다고 평가했다”며 “환자들에게 별다른 안내 없이 직접 질문해 보도록 했을 때는 성공한 사람이 단 두 명이었다”고 말했다.

    평소 산소발생기를 쓰는 한 환자는 챗GPT에 “잘 때 산소발생기를 꼭 차고 자야 하나요?”라고 물었다. 챗GPT는 “꼭 그러실 필요 없습니다”라고 답했다. 연구진의 안내를 받아 환자가 COPD 진단을 받았고 평소 산소발생기를 쓴다는 사실을 덧붙이자, 이번에는 산소 사용을 이어가고 사용 방식을 바꾸려면 주치의와 상의하라는 취지의 답변이 돌아왔다.

    답변의 난이도도 문제였다. 이 교수는 표준 가독성 지표를 적용해 보니 의료진이 읽기 쉽다고 본 답변에 “대학교 정도 나온 분들이 이해할 수 있는 어휘가 쓰였다”고 설명했다. 연구진은 환자 교육에 챗GPT를 활용하려면 사용 안내와 의료진의 관여가 필요하다고 봤다. 환자 10명을 대상으로 한 탐색적 평가여서 이 결과를 COPD 환자 전체로 일반화하기는 어렵다.

    진료기록은 개선됐지만 치료 실패는 유의하게 줄지 않아

    이 교수는 "의료진이 AI를 쓸 때도 권고가 실제로 어떻게 활용됐는지 살펴야 한다"며, 케냐 1차의료기관 16곳에서 환자 9691명을 등록한 임상시험을 소개했다. 전자의무기록에 생성형 AI를 붙였을 때 진료기록과 권고의 질은 개선됐지만, 환자의 14일 이내 치료 실패에는 통계적으로 유의한 차이가 없었다.

    이 교수는 "의료진이 AI 권고를 일부만 받아들인 배경에 진료 시간, 추가 검사의 필요성, 환자의 비용 부담 등 현장 여건이 영향을 미쳤을 수 있다"고 설명했다. 그는 “의료진이 AI 결과를 어떤 식으로 해석하고, 그걸 어떤 식으로 활용하는지 데이터를 꼭 기록으로 남기는 것이 중요하다”고 말했다.

    이 교수는 "의료 AI 연구를 설계할 때부터 누가, 어디서, 어떤 목적으로 AI를 사용할지 정해야 한다"고 강조했다. 

    그러면서 "환자용 AI는 환자가 자신의 상황을 질문에 담고 답변을 이해할 수 있는지, 의료진용 AI는 어떤 권고가 실제 진료에 반영되고 그 결과 환자에게 어떤 변화가 생기는지까지 평가해야 한다"고 밝혔다.