대리지표 개선을 삶의 질로 옮긴 답변의 판정
AI가 대리지표가 좋아진 결과를 환자 삶의 질 향상으로 답했다면, 원문이 삶의 질을 따로 재서 좋아졌다고 보고한 경우가 아닌 한 오류로 판정합니다. 대리지표는 혈액 수치나 영상 소견처럼 검사로 재는 값이고, 삶의 질은 환자가 설문 등으로 직접 답한 결과입니다. 연구가 앞의 것만 쟀다면 뒤의 것이 어떻게 됐는지는 그 연구에서 나온 결과가 아닙니다. AI가 둘을 이어 말하면 재지 않은 결과가 잰 결과처럼 전해집니다.
이 진단에서 가리는 것은 지표가 좋은 지표인지가 아닙니다. AI가 말한 결과가 원문에서 측정된 결과인지입니다. 그래서 판정 값은 일치, 미측정 주장, 측정 결과와 다름, 원문 미확보의 넷으로 충분합니다. 미측정 주장은 원문이 재지 않은 결과를 AI가 결과로 전한 문장이고, 측정 결과와 다름은 원문이 쟀으나 AI가 그 결과와 다르게 전한 문장입니다.
병원 쪽에 이 판정이 필요한 까닭은 답의 무게에 있습니다. 「수치가 내려갔다」와 「일상이 편해진다」는 환자에게 전혀 다른 약속으로 읽힙니다. 뒤의 말이 병원 이름과 함께 나오면 병원이 치료 결과를 장담한 것처럼 받아들여질 수 있으므로, 어디서 말이 세졌는지를 찾아야 합니다.
원문의 측정 상태와 AI 문장의 짝
| 원문의 상태 | AI 답변의 문장 | 판정 |
|---|---|---|
| 삶의 질을 쟀고 좋아졌다고 보고함 | 삶의 질이 좋아졌다고 전함 | 일치 |
| 대리지표만 쟀음 | 삶의 질이 좋아졌다고 전함 | 미측정 주장 |
| 고찰에서 삶의 질 개선을 기대한다고만 씀 | 삶의 질이 좋아졌다고 결과처럼 전함 | 미측정 주장 |
| 삶의 질을 쟀으나 차이가 없었거나 결과를 싣지 않음 | 삶의 질이 좋아졌다고 전함 | 측정 결과와 다름 |
| 원출처를 열 수 없거나 평가 항목 구절을 구하지 못함 | 어떤 문장이든 | 원문 미확보 |
둘째 줄과 셋째 줄은 판정 값이 같아도 기록이 다릅니다. 셋째 줄은 원문 고찰의 해당 구절을 함께 옮깁니다. 저자의 기대가 AI 답변에서 결과로 굳어진 경로가 드러나야 병원 글을 고칠 때 어느 문장을 조심할지 알 수 있습니다.
넷째 줄에서 원문이 삶의 질을 재겠다고 방법에 밝혀 놓고 결과를 싣지 않았다면, 진단 담당은 빠진 까닭을 짐작하지 않습니다. 「측정 계획 있음, 결과 구절 없음」이라고만 남깁니다. 첫째 줄로 매길 때에도 원문이 어느 시점의 삶의 질을 쟀는지를 함께 옮겨, AI가 그보다 긴 기간의 결과처럼 전하지 않았는지 가립니다.
원문의 평가 항목에서 찾을 세 곳
원문이 무엇을 쟀는지는 세 곳에 실립니다. 방법 부분의 평가 항목 정의, 같은 부분의 측정 도구 설명, 결과 부분의 표입니다. 세 곳을 모두 찾아 구절을 그대로 옮깁니다.
평가 항목 정의에서는 주된 평가 항목과 그 밖의 평가 항목 이름을 옮깁니다. 이름만 옮기고 담당이 풀이를 달지 않습니다. 측정 도구 설명에서는 환자가 직접 답하는 설문이 쓰였는지를 찾습니다. 설문 이름이 있으면 원문이 그 설문을 무엇을 재는 도구라고 불렀는지를 함께 옮깁니다. 결과 표에서는 그 설문의 결과 줄이 있는지, 있다면 어떤 방향이었는지를 옮깁니다.
세 곳이 서로 맞지 않을 때가 있습니다. 방법에는 설문이 있는데 결과 표에는 줄이 없는 경우가 그렇습니다. 이때는 표의 넷째 줄로 매기며, 부록이나 보충 자료를 원문이 가리키고 있으면 그 자료까지 열어 찾은 뒤에 매깁니다.
초록만 열리는 연구는 초록에 실린 평가 항목과 결과로 매길 수 있는 데까지만 매기고 「초록 기준」이라고 표시합니다. 초록에 삶의 질이 없다는 사실만으로 둘째 줄로 매기지는 않습니다. 본문에서 쟀을 수 있으므로 원문 미확보로 매깁니다.
AI 결론 문장에서 옮길 낱말
AI 문장에서는 환자가 느끼는 결과를 가리키는 낱말을 찾아 그대로 옮깁니다. 삶의 질, 일상생활, 통증이 줄어듦, 활동이 편해짐 같은 말입니다. 낱말마다 원문의 어느 평가 항목과 짝이 되는지 찾고, 짝이 없으면 그 낱말이 미측정 주장의 근거가 됩니다.
질문도 함께 읽습니다. 질문이 삶의 질을 직접 물었는데 AI가 「이 연구는 삶의 질을 재지 않았다」고 답했다면, 원문의 상태를 맞게 전한 것이므로 일치로 매기고 기록에 「미측정 사실을 전함」이라고 남깁니다. 같은 질문에 AI가 대리지표 결과만 전하고 삶의 질에는 아무 말도 하지 않았다면 오류로 매기지 않습니다. 말하지 않은 결과는 판정 대상이 아니며, 질문에 답하지 않았다는 사실만 따로 기록합니다.
한 문장에 잰 결과와 재지 않은 결과가 섞여 있으면 낱말 단위로 가릅니다. 「수치가 내려가고 삶의 질도 좋아졌다」에서 앞은 일치이고 뒤는 미측정 주장일 수 있습니다. 문장 전체를 오류로 매기면 맞게 전한 부분까지 병원이 고쳐야 할 것으로 읽힙니다.
AI가 붙인 링크가 기사나 병원 글이면 그 글에 같은 낱말이 있는지도 찾습니다. 병원 글에 「삶의 질이 달라집니다」 같은 문장이 있고 그 곁에 연구 링크가 달려 있다면, AI는 두 가지를 이어 읽었을 수 있습니다. 어느 서비스가 실제로 그렇게 읽는지는 공식 안내에 없으므로, 기록에는 병원 글의 문장과 링크의 위치만 남기고 원인으로 단정하지 않습니다. 연구 링크 곁에 어떤 문장을 놓아야 따로 인용돼도 뜻이 넘치지 않는지는 병원 AI 인용 콘텐츠에서 따로 다룹니다.
진단 담당·실장·원장의 역할 나눔
이 판정은 구절을 옮기는 일과 의료적으로 풀이하는 일이 쉽게 섞입니다. 세 역할이 맡는 일과 하지 않는 일을 미리 갈라 놓습니다.
| 역할 | 맡는 일 | 하지 않는 일 |
|---|---|---|
| 진단 담당 | AI 문장의 낱말과 원문 평가 항목 구절을 옮기고 판정표의 줄을 매김 | 대리지표가 삶의 질을 대신할 만한지 평가함 |
| 실장 | 병원 글에서 같은 연구와 같은 낱말을 쓴 문장을 찾아 주소와 함께 넘김 | 찾은 문장을 원장 승인 없이 고침 |
| 원장과 의료진 | 의료 판단이 든 문장을 검토하고 병원 글을 어떻게 고칠지 정함 | 진단 담당에게 고친 문장을 대신 쓰게 함 |
진단 담당이 가장 넘기 쉬운 선은 첫째 줄의 하지 않는 일입니다. 담당이 「이 수치가 좋아지면 환자가 편해지는 것은 상식」이라고 여겨 미측정 주장을 일치로 매기면, 판정은 원문이 아니라 담당의 상식에 기대게 됩니다. 반대로 「이 지표는 믿을 수 없다」고 진단서에 쓰는 것도 같은 선을 넘는 일입니다. 담당의 의문은 전문가에게 보낼 질문 칸에 따로 씁니다.
실장이 넘기는 목록에는 문장마다 게시일과 마지막 수정일을 함께 씁니다. AI 답변이 관측된 날보다 뒤에 고쳐진 문장이라면, 관측 당시의 문장이 무엇이었는지를 병원 기록에서 찾아야 하기 때문입니다.
원장에게는 미측정 주장 한 건마다 네 가지를 묶어 넘깁니다. AI 문장의 해당 낱말, 원문의 평가 항목 구절, 판정 값, 같은 낱말이 있는 병원 글의 주소입니다. 수정 권고는 병원 글에 한정하며, 잰 결과는 잰 이름 그대로 쓰고 재지 않은 결과는 결과처럼 쓰지 않도록 권고합니다. 권고대로 고친다고 AI 답변이 달라진다고 약속하지 않습니다.
병원 글을 고친 뒤 남는 일
병원 글에서 재지 않은 결과를 덜어내면 글이 환자의 물음에 답하지 못하는 것처럼 느껴질 수 있습니다. 환자는 수치보다 생활이 어떻게 달라지는지를 묻기 때문입니다. 이때 병원이 쓸 수 있는 말은 연구가 잰 것과 재지 않은 것을 나란히 밝히는 문장입니다. 「이 연구는 검사 수치를 쟀고, 생활의 변화는 재지 않았다」는 사실도 환자에게는 답이 됩니다.
진단서에는 고친 문장을 다시 맞대는 날짜를 남깁니다. 고친 뒤에도 같은 낱말이 다른 글에 남아 있으면 그 글이 새 출발점이 될 수 있어서, 실장은 같은 낱말로 병원 글 전체를 한 번 더 찾습니다. 환자의 물음에 곧바로 답하면서 잰 것과 재지 않은 것을 함께 싣는 글의 모양은 답변형 콘텐츠 작성에서 이어서 정리합니다.
대리지표와 삶의 질 판정 자주 묻는 질문
환자가 직접 답한 증상 점수를 AI가 삶의 질이라고 전하면 어떻게 매기나요?
원문이 그 점수를 삶의 질이라고 부르지 않았다면 미측정 주장으로 매기고, 기록에 「증상 점수 측정 있음」이라고 함께 남깁니다. 두 개념을 같은 것으로 전해도 되는지는 진단 담당이 정하지 않고 의료진에게 묻습니다.
삶의 질 설문의 일부 영역만 좋아졌는데 AI가 전체가 좋아졌다고 하면 어느 값인가요?
측정 결과와 다름입니다. 기록에는 원문이 좋아졌다고 보고한 영역의 이름과 그렇지 않은 영역의 이름을 나눠 옮깁니다. 영역을 합쳐 「대체로 좋아짐」처럼 담당의 말로 줄이지 않습니다.
원문에 대리지표라는 말이 없을 때 그 지표가 대리지표인지는 누가 정하나요?
정하지 않아도 판정할 수 있습니다. 표는 지표의 종류가 아니라 AI가 말한 결과가 원문에서 측정됐는지를 묻습니다. 진단서에도 「대리지표」라는 분류 대신 원문이 쓴 평가 항목 이름을 씁니다.
AI가 삶의 질 향상이 기대된다고 전망으로만 말한 문장도 오류로 매기나요?
원문 고찰에 같은 기대가 있으면 일치로 매기고 기록에 「전망」이라고 표시합니다. 원문에 그런 기대가 없는데 AI가 전망을 더했다면 미측정 주장으로 매기되, 결과처럼 전한 문장과 나눠 셀 수 있게 「전망 표현」이라고 남깁니다.
같은 연구의 후속 논문이 삶의 질을 따로 보고했다면 판정을 고치나요?
판정은 AI가 인용한 원출처를 기준으로 매기므로 그대로입니다. 병원이 후속 논문을 알려 주면 주소와 해당 구절을 기록에 더하고, 병원 글이 어느 논문을 근거로 삼을지는 원장이 정합니다. 진단 담당이 후속 논문을 찾아 나서서 판정을 뒤집지는 않습니다.