← 목록으로
Pet Owner Behavior

Utility of ChatGPT in generating accurate client handouts for common veterinary internal medicine diseases

2026-06-18

Utility of ChatGPT in generating accurate client handouts for common veterinary internal medicine diseases

  • 저자: Novak SR; Reed-Jones L; Kedrowicz AA; Birkenheuer AJ; Royal KD; McCool KE
  • 출처: (2026)
  • DOI/링크: 10.1093/jvimsj/aalaf058
  • 분야 태그: #Pet-Owner-Behavior
  • 정리일: 2026-06-18

TL;DR

ChatGPT-3.5로 개 당뇨병(DM)·면역매개용혈성빈혈(IMHA)·고양이 염증성장질환(IBD) 클라이언트 교육 자료를 생성한 결과, 반려동물 보호자(50명)의 이해도·만족도가 유의하게 향상(p<0.001)되었고, ACVIM 내과 전문의의 71~76%가 DM·IBD 자료를 소수 수정만으로 사용 가능하다고 응답하여, 수의 클라이언트 교육 보조 도구로서의 잠재력이 확인되었다.

1. 연구 배경 및 동기

  • 다루는 문제: 수의 내과 진료에서 보호자 교육은 순응도와 치료 결과에 영향을 미치나, 교육 자료 제작에 시간과 자원이 필요하다. ChatGPT가 정확한 클라이언트 교육 자료를 효율적으로 생성할 수 있는지 평가가 필요하다.
  • 기존의 공백: ChatGPT가 수의 내과 질환에 대한 클라이언트 교육 자료를 생성하고 이를 보호자·전문가가 어떻게 평가하는지를 체계적으로 조사한 연구가 없었다.

2. 관련 연구

구분 기존 연구 이 논문
AI 의료 자료 생성 연구 인간 의료 맥락에서 ChatGPT 기반 환자 교육 자료 평가 연구 수의 내과 맥락에서 ChatGPT 생성 클라이언트 자료의 이해도·정확도 이중 평가
수의 클라이언트 교육 연구 클라이언트 교육 자료의 가독성·정확도 연구 ChatGPT가 보호자 이해도 향상에 미치는 효과를 전문의 평가와 함께 검증
  • 대형언어모델(LLM)의 의료·수의학 콘텐츠 생성 가능성이 부상하였으나, 실제 보호자와 전문의 양측의 평가를 동시에 수행한 수의 연구는 없었다.

3. 핵심 기여

  1. 표준화된 프롬프트로 ChatGPT-3.5가 생성한 개 DM·IMHA 및 고양이 IBD 클라이언트 자료를 반려동물 보호자(n=50)와 ACVIM 소동물내과(SAIM) 전문의(n=62~67)에게 별도 설문으로 평가하였다.
  2. 보호자들은 자료 독후 세 질환 모두에서 이해도가 유의하게 향상(DM: Z=5.865, p<0.001; IMHA: Z=5.953; IBD: Z=5.508)되었으며, 만족도 중앙값이 45점(05점 척도)으로 높았다.
  3. SAIM 전문의의 71%(DM)·76%(IBD)·50%(IMHA)가 해당 자료를 “소수 또는 최소한의 수정”만으로 사용 가능하다고 응답하였다.

4. 제안 방법론

  • 전체 접근 논리: 표준화된 ChatGPT-3.5 프롬프트로 3개 질환 클라이언트 자료를 생성하고, 보호자와 전문의 대상 두 개의 독립 전자 설문으로 교육적 가치와 의학적 정확도를 이중 평가하였다.
    • (1) ChatGPT-3.5에 표준화된 프롬프트 입력 → 개 DM·IMHA, 고양이 IBD 클라이언트 자료 생성
    • (2) 반려동물 보호자(n=50) 설문: 자료 읽기 전후 이해도 차이(Z검정), 만족도(0~5점 척도)
    • (3) ACVIM SAIM 전문의(n=62~67) 설문: 자료 정확도 및 임상 사용 가능성(“소수 수정” 기준) 평가

5. 실험 설정

항목 내용
ChatGPT 버전 ChatGPT-3.5
대상 질환 개 당뇨병(DM), 개 면역매개용혈성빈혈(IMHA), 고양이 염증성장질환(IBD)
보호자 평가단 반려동물 보호자 50명 (이해도·만족도)
전문의 평가단 ACVIM SAIM 전문의 62~67명 (정확도·사용 가능성)
통계 방법 윌콕슨 부호 순위 검정(이해도 전후 비교)

6. 실험 결과 분석

지표 변화(Δ) 조건 · 유의성
보호자 이해도 향상 (DM) Z=5.865 p<0.001
보호자 이해도 향상 (IMHA) Z=5.953 p<0.001
보호자 이해도 향상 (IBD) Z=5.508 p<0.001
보호자 만족도 중앙값 4(DM·IMHA), 5(IBD) 0~5점 척도
전문의 사용 가능 비율 (DM) 71% (48/67명) 소수 또는 최소 수정 기준
전문의 사용 가능 비율 (IBD) 76% (47/62명) 소수 또는 최소 수정 기준
전문의 사용 가능 비율 (IMHA) 50% (32/64명) 소수 또는 최소 수정 기준

제안 기전(인과 사슬): ChatGPT-3.5 표준 프롬프트 → 이해하기 쉬운 교육 자료 생성 → 보호자 질환 이해도·만족도 향상 → 전문의의 소수 수정으로 임상 사용 가능 → 수의 클라이언트 교육 효율성 향상 기여

7. 비판적 평가

강점

  • 보호자(수용성)와 전문의(정확도) 양측을 동시에 평가하여 클라이언트 자료의 다면적 유용성을 검증하였다.
  • 표준화된 프롬프트 사용으로 생성 조건의 재현성을 확보하였다.

한계 · 의문

  • ChatGPT-3.5만 평가하여 최신 버전(GPT-4 등)과의 비교 및 시간 경과에 따른 성능 변화를 반영하지 못하였다.
  • 자료의 가독성(읽기 수준) 및 의학적 최신성을 체계적으로 평가하지 않았다.
  • 보호자 표본(n=50)의 학력·배경이 결과에 영향을 미칠 수 있다.
  • IMHA 자료의 전문의 사용 가능 비율(50%)이 상대적으로 낮아 복잡한 질환에서의 한계를 시사한다.

8. 향후 연구 방향

  • 최신 ChatGPT 버전(GPT-4o 등) 및 다른 LLM의 수의 교육 자료 생성 성능 비교 연구
  • ChatGPT 생성 자료가 보호자 치료 순응도와 반려동물 임상 결과에 미치는 장기 효과 측정
  • 수의 전문의와 AI가 협력하는 하이브리드 자료 제작 워크플로 효율성 검증

9. 결론

ChatGPT-3.5는 개 DM·IMHA 및 고양이 IBD에 대한 클라이언트 교육 자료를 효과적으로 생성하였으며, 보호자의 이해도와 만족도를 유의하게 향상시키고 전문의의 50~76%가 소수 수정만으로 임상 적용 가능하다고 평가하였다. 일부 정교화가 필요하지만 ChatGPT는 수의 클라이언트 교육 지원 보조 도구로서 실용적 잠재력을 갖는다.

Keywords

ChatGPT, LLM, AI, client education, veterinary internal medicine, diabetes mellitus, IMHA, IBD, client handout