교차시험의 순서 효과를 무시한 답변, 세척 기간과 분석 설계 점검

AI가 교차시험의 결과를 서로 다른 두 집단을 견준 것처럼 전하거나 치료 순서의 영향을 빼고 전했을 때, 원출처가 밝힌 교차 설계 구절과 맞대어 점검하는 기준입니다.

목차

치료 순서의 영향을 뺀 답의 진단

핵심 답

AI가 교차시험에서 치료 순서의 영향을 무시하고 답했다면, 원출처가 밝힌 교차 설계와 세척 기간, 순서 효과를 분석한 구절을 찾아 옮긴 뒤 두 가지를 맞댑니다. AI가 두 치료를 서로 다른 집단이 받은 것처럼 전했는지, 그리고 순서나 앞 치료의 영향에 관해 원문과 다른 말을 했는지입니다. 앞의 것은 설계 바뀜으로, 뒤의 것은 원문과 다름으로 진단합니다.

교차시험은 같은 사람이 두 치료를 차례로 받는 설계입니다. 참여자의 절반은 한 치료를 먼저 받고 나머지 절반은 다른 치료를 먼저 받으며, 두 시기 사이에 앞 치료의 영향이 빠지도록 쉬는 세척 기간을 놓습니다. 견주는 것은 한 사람 안에서 두 치료를 받았을 때의 차이입니다.

이 설계에는 따로 챙겨야 할 것이 있습니다. 앞 치료의 영향이 세척 뒤에도 남아 뒤 시기의 결과에 섞이는 일, 어느 치료를 먼저 받았느냐에 따라 결과가 달라지는 일입니다. 연구는 이런 영향이 있었는지를 분석해 싣고, 그 분석이 없으면 결과를 읽는 데 단서가 붙습니다. 진단은 세척 기간이 충분했는지, 연구가 잘 설계되었는지를 평가하지 않고, AI가 전한 설계와 단서가 원문과 같은지만 가립니다.

교차 설계 판정표

교차시험의 결과를 전한 AI 문장은 아래 교차 설계 판정표의 일곱 줄 가운데 하나로 판정합니다.

AI 문장원출처판정기록에 옮길 것
같은 사람이 두 치료를 모두 받은 결과로 전함같은 사람 안에서 견준 설계임설계 보존없음
두 치료를 서로 다른 집단이 받은 결과로 전함같은 사람 안에서 견준 설계임설계 바뀜AI가 쓴 말, 원문의 설계 구절
결과를 설계를 밝히지 않고 전함같은 사람 안에서 견준 설계임설계 보존「설계 표시 없음」
순서나 앞 치료의 영향이 없었다고 전함그 분석을 싣지 않았거나 영향이 있었다고 밝힘원문과 다름순서 효과 구절 또는 「분석 없음」
한 시기만의 결과를 시험 전체의 결과로 전함시기를 나누어 결과를 실음원문과 다름「시기 표시 없음」, 원문의 시기 구절
결과의 값, 세척 기간, 설계의 이름을 원문과 다르게 전함어느 경우든원문과 다름두 표기
어느 쪽이든열 수 없거나 설계 구절을 찾지 못함원문 미확보구하지 못한 까닭과 날짜

교차 설계 판정표의 판정 값은 설계 보존, 설계 바뀜, 원문과 다름, 원문 미확보 넷입니다. 이 표의 넷째 줄에서 원문이 순서 효과를 분석해 영향이 없었다고 밝혔고 AI가 그대로 전했다면 첫째 줄이며, 기록에 그 구절을 옮깁니다. 같은 표의 둘째 줄과 넷째 줄은 한 문장에 함께 매길 수 있습니다.

교차 설계 옮김표

원출처에서는 아래 교차 설계 옮김표의 다섯 칸을 원문 표기대로 옮깁니다.

칸옮길 내용교차 설계 판정표에서 쓰는 줄
설계와 순서교차 설계라는 이름, 어느 치료를 먼저 받는 묶음이 있는지첫째, 둘째, 셋째, 여섯째
세척 기간두 시기 사이에 쉰 기간과 그렇게 정한 근거여섯째
순서 효과 분석순서나 앞 치료의 영향을 분석했는지와 그 결과넷째
분석 방법한 사람 안의 차이로 분석했는지, 시기를 나누어 분석했는지둘째, 다섯째
사람 수참여한 수, 시기마다 마친 수둘째, 여섯째

교차 설계 옮김표의 사람 수 칸은 설계 바뀜을 찾는 데 쓰입니다. 교차시험에서는 참여한 사람 모두가 두 치료를 받습니다. 스무 명이 참여했다면 한 치료를 받은 사람도 스무 명, 다른 치료를 받은 사람도 같은 스무 명입니다. AI가 「한 치료를 받은 스무 명과 다른 치료를 받은 스무 명」처럼 전했다면 사람 수가 맞더라도 서로 다른 마흔 명으로 읽히므로 교차 설계 판정표의 둘째 줄에 해당하는지를 가립니다. 이 숫자는 셈을 풀려고 든 가상의 숫자입니다.

AI 문장에서 설계 구절로 가는 다섯 단계

  1. 진단 담당이 질문과 AI 원응답을 날짜, 서비스 이름과 함께 그대로 보관합니다.
  2. 진단 담당이 두 치료를 견준 문장마다 번호를 매기고, 「집단」「군」「각각」「차례로」처럼 누가 어떤 치료를 받았는지 가리키는 말을 그대로 옮깁니다.
  3. 진단 담당이 인용 링크를 열어 원출처의 방법 부분에서 교차 설계 옮김표의 다섯 칸을 옮깁니다.
  4. 진단 담당이 결과 부분에서 AI 수치와 같은 값이 실린 곳을 찾아, 그 값이 시험 전체의 결과인지 한 시기의 결과인지 옮깁니다.
  5. 진단 담당이 번호를 매긴 문장마다 교차 설계 판정표의 줄을 매기고, 넘긴 지점이 AI 답인지 중간에 놓인 글인지를 함께 씁니다.

셋째 단계에서 원문이 순서 효과 분석을 싣지 않았다면 「분석 없음」이라고 쓰고, 담당이 결과의 생김새로 영향이 없었으리라 짐작하지 않습니다. 넷째 단계에서 원문이 첫 시기의 결과만 따로 실은 까닭을 밝혔다면 그 구절도 옮깁니다. 앞 치료의 영향이 남은 것으로 판단해 첫 시기만 분석했다고 밝힌 연구라면, 그 결과는 교차 비교가 아니라 첫 시기의 두 묶음을 견준 결과입니다.

한 사람 안의 비교와 두 집단 사이의 비교

두 집단을 견주는 시험에서는 한 사람이 한 치료만 받습니다. 두 치료의 차이는 서로 다른 사람들의 결과를 견주어 구하고, 사람마다 다른 바탕의 차이는 배정을 고르게 하는 것으로 다룹니다. 한 사람 안에서 견주는 교차시험에서는 같은 사람이 두 치료를 모두 받으므로 사람마다 다른 바탕의 차이가 비교에서 빠집니다. 대신 시간이 흐르며 생기는 차이가 들어옵니다.

읽는 사람에게 전해지는 뜻도 다릅니다. 「한 치료를 받은 집단이 다른 치료를 받은 집단보다 좋았다」는 문장은 처음부터 그 치료를 받은 사람들의 결과로 읽힙니다. 교차시험의 결과는 절반의 사람에게는 다른 치료를 먼저 받은 뒤의 결과입니다. 앞 치료의 영향이 다 빠졌는지가 결과를 읽는 단서인데, 집단을 견준 문장으로 옮겨지면 그 단서가 놓일 곳이 없어집니다.

참여한 사람의 수가 주는 인상도 다릅니다. 교차시험은 같은 사람을 두 번 재므로 적은 사람으로도 차이를 가려낼 수 있습니다. 같은 결과를 두 집단 비교처럼 전하면 읽는 사람은 실제보다 많은 사람이 참여한 시험으로 받아들일 수 있습니다.

둘을 가르는 물음은 하나입니다. AI 문장에서 두 치료를 받은 사람이 같은 사람으로 읽히는지, 다른 사람으로 읽히는지입니다. 같은 사람으로 읽히면 설계 보존이고, 다른 사람으로 읽히면 설계 바뀜입니다. 어느 쪽으로도 읽히지 않는 문장은 교차 설계 판정표의 셋째 줄입니다.

교차시험 인용 점검 자주 묻는 질문

세척 기간이 짧아 보이면 진단서에 그렇게 쓰나요?

쓰지 않습니다. 기간이 알맞은지는 치료의 성질을 아는 사람이 판단할 일이어서, 담당은 원문의 세척 기간과 저자가 밝힌 근거만 옮깁니다. 의문은 의료진에게 보낼 물음 칸에 쓰고, 받은 답은 「의료진 답변」으로 밝혀 기록합니다.

도중에 빠져 한 치료만 받은 사람이 있으면 사람 수는 어느 수와 맞대나요?

원문이 그런 사람을 분석에 넣었는지 밝힌 구절을 옮기고, AI가 전한 수를 참여한 수, 시기마다 마친 수와 차례로 맞댑니다. AI가 전한 수가 어느 수와도 같지 않으면 여섯째 줄입니다.

AI가 환자들이 한 치료를 더 선호했다고 전하면 무엇과 맞대나요?

원문이 선호를 따로 조사해 실었는지를 찾습니다. 교차시험은 같은 사람이 두 치료를 겪으므로 선호를 물을 수 있는 설계이지만, 묻지 않은 연구도 있습니다. 선호 조사가 실려 있고 값이 같으면 설계 보존이고, 실려 있지 않은데 결과의 차이를 선호로 옮겨 전했다면 원문과 다름으로 매깁니다.

질문이 쓰던 치료에서 다른 치료로 바꾸면 어떠냐고 물었을 때 교차시험 결과를 답으로 든 문장은 어떻게 읽나요?

교차시험의 뒤 시기는 세척을 거친 뒤의 결과여서, 쉬지 않고 치료를 바꾼 환자의 결과와 같지 않습니다. AI가 교차시험의 결과를 「바꾸면 이렇게 된다」로 전했다면 원문이 다루지 않은 상황의 결론이므로 원문과 다름으로 매기고, 기록에 질문 원문과 세척 기간 구절을 옮깁니다.

교차시험 여러 편을 합친 분석을 AI가 인용했다면 어느 글과 맞대나요?

AI 문장이 가리킨 합친 분석과 맞댑니다. 합친 분석이 교차시험을 어떻게 다루었는지 밝힌 구절을 옮기고, 그 구절이 없으면 「교차시험 처리 구절 없음」이라고 씁니다. 낱낱의 교차시험까지 거슬러 가는 것은 AI 문장이 특정 시험을 가리켰을 때에만 합니다.

세척할 수 없는 치료와 한 사람의 좌우를 나눈 시험

예외·주의

수술처럼 한 번 받으면 되돌릴 수 없는 치료는 세척이 되지 않아 교차시험으로 다루기 어렵습니다. 그런데도 AI가 그런 치료의 시험을 교차시험이라고 전했다면, 원문의 설계 구절을 옮겨 설계 이름이 맞는지부터 맞댑니다. 원문이 교차 설계가 아니라면 설계의 이름을 다르게 전한 것이므로 교차 설계 판정표의 여섯째 줄이고, 기록에 「설계 이름 다름」을 씁니다.

한 사람의 왼쪽과 오른쪽에 서로 다른 치료를 하고 견주는 시험도 같은 사람 안의 비교입니다. 치아나 피부를 다루는 연구에서 쓰는 설계이고, 시간 차례가 아니라 부위로 나눈다는 점이 교차시험과 다릅니다. 이 설계에서는 세척 기간 칸에 「해당 없음」이라고 쓰고, 한쪽 치료가 반대쪽에 영향을 줄 수 있는지에 관해 원문이 밝힌 구절을 순서 효과 분석 칸에 옮깁니다. AI가 「환자 몇 명씩 두 집단」으로 전했다면 같은 표의 둘째 줄입니다.

맨 위로 이동

AI 인용 출처 서비스 자세히 보기