의료진과 서비스 진술의 정확성 목록으로

본원에서 하지 않는 검사를 가능하다고 한 AI 안내, 제공 여부 판정

본원에서 하지 않는 검사를 AI 답변이 가능하다고 안내했는지를, 병원이 승인한 서비스 목록과 답 속 문장이 병원을 주어로 삼았는지에 따라 가르고 일반 의학 설명과 섞인 경우를 따로 다루는 기준입니다.

목차

병원을 주어로 한 진술인지로 가르는 제공 오류

핵심 답

본원에서 하지 않는 검사를 가능하다고 안내했는지는 답 속 문장이 병원을 주어로 삼아 그 검사를 한다고 말했는지와, 그 검사가 원장이 승인한 서비스 목록에 있는지로 판정합니다. 병원 이름과 떨어진 곳에서 증상에 쓰이는 검사를 설명한 문장은 일반 의학 설명이라 제공 오류가 아니고, 병원 소개 가까이에 붙어 제공처럼 읽히는 문장은 문맥 혼동으로 따로 다룹니다.

AI 답변은 병원을 소개하면서 그 진료과목에서 쓰이는 검사를 함께 설명하는 경우가 있습니다. 이때 검사 이름이 답에 나왔다는 것만으로 제공 오류로 세면, 병원과 상관없는 의학 설명까지 병원 쪽 오류로 기록됩니다. 반대로 병원 이름이 주어로 적혀 있지 않다는 이유로 모두 넘기면, 환자가 병원에서 받을 수 있다고 읽을 문장을 놓칩니다.

그래서 판정은 문장 하나가 아니라 그 문장이 놓인 문맥까지 따집니다. 병원 소개 문단 안에 있는지, 다른 병원과 함께 나열된 목록 안에 있는지, 증상 설명 문단에 있는지에 따라 같은 검사 이름도 뜻이 달라집니다.

서비스 공식 안내로 알 수 있는 범위

챗GPT 공식 도움말은 웹 검색을 쓴 답에 인용이 들어갈 수 있고, 검색 결과와 인용이 불완전하거나 틀릴 수 있으니 인용된 출처를 열어 답을 뒷받침하는지 가리라고 안내합니다. 퍼플렉시티 공식 도움말은 답마다 원래 출처로 이어지는 번호 붙은 인용을 단다고 안내합니다.

제공 오류로 판정한 문장에 인용이 달려 있다면 그 출처가 실제로 병원이 검사를 한다고 적었는지부터 맞댑니다. 출처는 검사 일반을 설명했을 뿐인데 답이 병원과 이어 붙였다면, 고칠 곳은 출처가 아니라 병원 쪽 페이지의 미제공 표기 쪽일 수 있습니다.

서비스가 일반 의학 설명과 특정 병원 정보를 어떤 기준으로 한 답에 묶는지는 공식 안내에 나와 있지 않아 진단 기록으로 확인할 부분입니다. 그래서 진단 기록에는 문장만이 아니라 그 문장이 놓인 문단 전체를 함께 남깁니다.

제공 진술 판정표

답 속 검사 문장은 아래 제공 진술 판정표의 네 줄 가운데 하나로 판정합니다.

답 속 문장의 모습판정처리
병원 이름을 주어로 검사를 한다고 썼으나, 목록에 없거나 조건을 빼고 씀제공 오류출처를 찾아 정정 권고
병원 소개 문단 안에 주어 없이 검사 설명이 붙어 제공처럼 읽힘문맥 혼동병원 쪽 페이지의 미제공 표기 보강 권고
병원 소개와 떨어진 증상 설명 문단의 검사 설명일반 설명오류로 세지 않고 기록만 남김
병원 이름을 주어로 목록에 있는 검사를 조건까지 맞게 씀오류 아님기록만 남김

제공 진술 판정표의 판정 값은 이 넷뿐입니다. 문맥 혼동은 제공 오류보다 가벼운 값이 아니라 고칠 곳이 다른 값입니다. 제공 오류는 틀린 출처를 고치는 일로, 문맥 혼동은 병원이 하지 않는 검사를 병원 쪽에서 더 분명히 밝히는 일로 이어집니다.

제공 여부를 판정하는 다섯 단계

  1. 원장이 병원에서 하는 검사와 하지 않는 검사, 조건이 붙은 검사를 승인 서비스 목록표에 확정합니다.
  2. 진단 담당이 병원 이름과 검사 이름을 넣은 질문, 지역과 증상만 넣은 질문으로 답을 모읍니다.
  3. 진단 담당이 답마다 검사 이름이 나온 문장과 그 문장이 놓인 문단 전체, 인용 출처를 뽑습니다.
  4. 진단 담당이 제공 진술 판정표의 네 줄로 판정하고, 판정의 까닭으로 문장의 주어와 문단의 종류를 씁니다.
  5. 원장이 제공 오류와 문맥 혼동의 처리를 받아, 고칠 출처와 병원 쪽 표기를 정합니다.

둘째 단계에서 증상만 넣은 질문을 함께 쓰는 까닭은 환자가 검사 이름을 모른 채 증상으로 묻는 경우가 있어서입니다. 증상 질문의 답에서 병원이 그 검사를 한다고 소개되면, 검사 이름을 넣은 질문에서는 드러나지 않던 제공 오류가 잡힙니다.

셋째 단계에서 문단 전체를 뽑는 것이 번거로워 보여도 빼지 않습니다. 같은 문장이라도 앞 문단이 병원 소개였는지 증상 설명이었는지에 따라 제공 진술 판정표의 둘째 줄과 셋째 줄이 갈리므로, 문장만 남긴 기록으로는 판정을 다시 따질 수 없습니다.

넷째 단계에서 판정의 까닭을 쓰는 까닭은 같은 답을 다른 사람이 다시 판정할 때 값이 갈리지 않게 하려는 데 있습니다. 문장의 주어가 병원이었는지, 문단이 병원 소개였는지를 적어 두면 판정을 되풀이할 수 있습니다.

승인 서비스 목록표

첫째 단계의 목록은 아래 승인 서비스 목록표의 다섯 칸으로 만듭니다.

칸채우는 내용채우는 사람
검사 이름병원이 쓰는 이름과 환자가 쓰는 다른 이름진료 담당
제공 여부제공, 미제공, 조건부 가운데 하나원장
조건조건부일 때 요일, 의료진, 의뢰 여부 같은 조건진료 담당
다른 곳 안내미제공일 때 병원이 하는 안내의 범위원장
승인한 날원장이 목록을 승인한 날원장

승인 서비스 목록표의 다른 곳 안내 칸에는 병원이 하는 일만 씁니다. 진료 의뢰서를 써 주는지, 예약까지 돕는지처럼 병원의 행동을 적고, 다른 기관의 검사 내용이나 비용은 적지 않습니다.

제공 여부 판정에서 자주 틀리는 경우

첫째는 검사 이름만 찾아 세는 일입니다. 답에서 검사 이름을 찾아 모두 제공 오류로 세면, 증상 설명 문단의 일반 설명까지 오류 건수에 들어가 병원이 고칠 것이 실제보다 많게 보고됩니다. 검사 이름이 나온 문장마다 주어와 문단을 따로 가려야 합니다.

둘째는 조건부 검사를 두 값 가운데 하나로 밀어 넣는 일입니다. 특정 요일에만 하는 검사를 답이 조건 없이 가능하다고 소개했다면, 제공 진술 판정표의 첫째 줄대로 조건을 뺀 제공 오류입니다. 목록에 있는 검사라는 이유로 오류 아님으로 넘기면, 다른 요일에 찾아온 환자가 헛걸음합니다.

셋째는 다른 병원과 함께 나열된 목록을 소개 문단으로 읽는 일입니다. 여러 병원이 한 목록에 묶여 그 검사를 하는 곳으로 소개되었다면, 목록 제목이 곧 각 병원을 주어로 한 진술이 됩니다. 이 경우는 문맥 혼동이 아니라 제공 오류로 판정합니다.

넷째는 진료 담당의 확인 없이 목록을 채우는 일입니다. 진단 담당이 홈페이지 진료 안내만 보고 목록을 만들면, 홈페이지가 틀린 병원에서는 틀린 목록으로 맞는 답을 오류로 판정하게 됩니다. 목록은 원장의 승인을 받은 뒤에만 판정에 쓰고, 승인한 날보다 앞서 받은 답도 그 목록으로 다시 판정합니다.

검사 제공 여부 AI 안내 자주 묻는 질문

검사는 하지만 판독을 다른 기관에 맡기면 어떻게 판정합니까?

승인 서비스 목록표의 조건 칸에 판독을 맡긴다는 사실을 씁니다. 답이 병원에서 검사를 받을 수 있다고만 하면 오류 아님이고, 병원에서 판독까지 한다고 소개했다면 조건을 틀리게 쓴 제공 오류입니다.

검사 이름이 병원 목록과 조금 다르게 쓰였으면 같은 검사로 판정합니까?

진료 담당이 같은 검사인지 가린 뒤에 판정합니다. 같은 검사라면 그 이름을 목록의 다른 이름으로 더해, 다음 판정에서 같은 물음이 되풀이되지 않게 합니다.

문맥 혼동이 나오면 병원 글마다 하지 않는 검사를 모두 밝혀야 합니까?

문의가 오는 검사와 답에서 혼동이 나온 검사만 밝힙니다. 하지 않는 검사를 모두 나열하면 글이 길어지고, 정작 헷갈리는 검사가 목록 속에 묻힙니다.

장비를 갖춘 검사는 모두 제공으로 보아도 됩니까?

아닙니다. 장비가 있어도 담당 의료진이 없거나 지금 쓰지 않는다면 제공이 아닙니다. 제공 여부는 원장이 승인한 목록만 기준으로 삼고, 장비 목록은 판정 근거로 쓰지 않습니다.

AI 답변이 우리 병원에서 받을 수 없는 검사를 다른 병원에 가라고 권하면 오류입니까?

그 안내가 사실과 맞는다면 오류가 아닙니다. 다만 답이 특정 기관 이름을 들어 권했다면 그 문장은 병원이 확인할 수 없는 다른 기관의 정보이므로 판정 기록에 문장만 남기고, 그 기관의 제공 여부는 진단하지 않습니다.

판정표를 그대로 쓰기 어려운 경우

예외·주의

한 답 안에서 같은 검사가 두 번 나오고 한 번은 병원을 주어로, 한 번은 증상 설명으로 나왔다면 문장마다 따로 판정합니다. 두 문장 가운데 하나라도 제공 오류라면 그 답은 제공 오류가 있는 답으로 보고서에 세고, 일반 설명 문장은 기록에만 남깁니다.

검사를 새로 시작하기로 했지만 아직 시작일 전이라면 목록표에 미제공으로 두고 시작일을 조건 칸에 씁니다. 시작일 전에 받은 답에서 가능하다고 소개했다면 제공 오류이고, 시작일이 지난 뒤에는 목록을 제공으로 고친 날부터 새 기준으로 판정합니다.

본원과 지점의 검사 범위가 다른 병원이라면 목록표를 지점마다 따로 만듭니다. 지점에서만 하는 검사를 본원에서 가능하다고 소개한 답은 본원 목록 기준으로 제공 오류이고, 병원 이름만 있고 지점이 드러나지 않는 답은 지점을 가릴 수 있을 때까지 판정을 미룹니다.

맨 위로 이동

의료진·진료 정보 서비스 자세히 보기