비열등성 연구를 우수성 증거로 든 우열 결론의 표시

비열등성 연구로 우열을 말한 답의 진단

이 설계를 쓰는 까닭은 새 치료가 다른 면에서 장점이 있을 때가 많아서입니다. 먹기 편하거나 입원이 짧거나 비용이 낮은 치료라면, 주된 결과가 기존 치료에 크게 뒤지지 않는다는 것만 밝혀도 쓸 이유가 생깁니다. 그래서 연구는 어디까지를 「뒤지지 않는다」로 칠지 한계를 미리 정하고, 결과가 그 한계 안에 드는지를 검정합니다. 한계 안에 들었다는 결론은 더 낫다는 결론이 아닙니다.

AI 답에서는 「기존 치료에 못하지 않았다」가 「기존 치료만큼 좋다」를 거쳐 「기존 치료보다 낫다」로 옮겨지곤 합니다. 병원이 새 치료를 들인 경우 이 문장은 병원 이름 곁에서 기존 치료를 하는 다른 병원보다 낫다는 뜻으로 읽힐 수 있습니다. 진단은 어느 치료가 실제로 나은지를 다루지 않고, 우열의 말이 원문의 검정에서 나왔는지만 가립니다.

우열 결론 판정표

두 치료의 우열을 말한 AI 문장은 아래 우열 결론 판정표의 일곱 줄 가운데 하나로 판정합니다.

우열 결론 판정표의 판정 값은 원문 범위 안, 범위 넘김, 원문 미확보 셋입니다. 이 표의 둘째 줄에서 「똑같다」를 함께 받는 까닭은 두 치료가 같다는 결론도 비열등성 검정만으로는 나오지 않기 때문입니다. 같은 표의 셋째 줄은 비열등성 연구라도 우월성까지 미리 계획해 검정한 경우여서, 설계 이름만으로 범위 넘김을 매기지 않도록 따로 놓았습니다.

AI 결론에서 연구 가설로 가는 다섯 단계

1. 진단 담당이 질문과 AI 원응답을 날짜, 서비스 이름과 함께 그대로 보관합니다.
2. 진단 담당이 두 치료를 견준 문장마다 번호를 매기고, 「못하지 않다」「만큼」「보다 낫다」「우수하다」처럼 우열을 가리키는 말을 그대로 옮깁니다.
3. 진단 담당이 인용 링크를 열어 원출처까지 올라가 가설 구절 옮김표의 다섯 칸을 옮깁니다.
4. 진단 담당이 옮긴 칸에서 우월성 검정이 미리 계획된 것인지, 결과가 나온 뒤에 덧붙인 것인지를 원문의 말대로 표시합니다.
5. 진단 담당이 번호를 매긴 문장마다 우열 결론 판정표의 줄을 매기고, 넘긴 지점이 AI 답인지 중간에 놓인 글인지를 함께 씁니다.

셋째 단계에서 설계 이름은 제목이나 초록에 없을 수 있습니다. 그럴 때는 방법 부분에서 가설을 밝힌 문장과 한계를 정한 문장을 찾습니다. 한계를 정한 문장이 있으면 비열등성 연구이고, 담당이 결과의 생김새로 설계를 짐작하지 않습니다.

넷째 단계를 따로 놓는 까닭은 우열 결론 판정표의 둘째 줄과 셋째 줄 사이에 끼는 경우가 있어서입니다. 우월성 검정이 계획에 없었는데 결과가 좋게 나오자 뒤에 덧붙인 분석이라면, 원문이 그 사실을 밝힌 구절을 옮기고 우열 결론 판정표의 둘째 줄로 매깁니다. 미리 계획한 검정만 같은 표의 셋째 줄로 받습니다.

가설 구절 옮김표

원출처에서는 아래 가설 구절 옮김표의 다섯 칸을 원문 표기대로 옮깁니다.

가설 구절 옮김표의 견준 대상 칸은 AI 문장의 「기존 치료」가 무엇인지를 정합니다. 연구가 견준 것은 특정한 한 가지 치료인데 AI가 「기존 치료들보다」라고 넓혀 전했다면, 우열의 말과 함께 대상도 넓어진 것이므로 기록에 「견준 대상 넓힘」을 더합니다. 우월성 검정 칸에 옮길 것이 없으면 「계획 없음」이라고 쓰고 비워 두지 않습니다.

못하지 않다와 더 낫다의 비교

두 결론은 밝히려는 것이 다릅니다. 못하지 않다는 결론은 새 치료의 결과가 기존 치료보다 나쁘더라도 그 차이가 미리 정한 한계를 넘지 않는다는 뜻입니다. 결과가 조금 나빴어도 한계 안이면 이 결론이 나옵니다. 더 낫다는 결론은 새 치료의 결과가 기존 치료보다 좋고, 그 차이가 우연으로 설명되기 어렵다는 뜻입니다.

필요한 검정도 다릅니다. 못하지 않다는 결론에는 한계와 그 한계 안에 드는지를 가리는 검정이 있으면 됩니다. 더 낫다는 결론에는 우월성 검정이 따로 있어야 하고, 그 검정은 결과를 알기 전에 계획되어 있어야 합니다.

환자에게 전해지는 뜻도 다릅니다. 못하지 않다는 말을 들은 환자는 두 치료 가운데 자기 형편에 맞는 쪽을 고를 수 있다고 받아들입니다. 더 낫다는 말을 들은 환자는 기존 치료를 받을 이유가 없다고 받아들입니다. 기존 치료를 받고 있던 환자에게는 치료를 옮겨야 한다는 말로 닿습니다.

그 사이에 있는 말이 「만큼 좋다」입니다. 못하지 않다를 쉬운 말로 풀어 쓴 것으로 읽을 수 있으므로 우열 결론 판정표의 첫째 줄로 매기고, 기록에 AI가 쓴 말을 옮깁니다. 「똑같다」「차이가 없다」처럼 같음을 단정한 말은 같은 표의 둘째 줄입니다.

판정 뒤 병원 글과 바깥 글로 이어지는 일

우열의 말이 제조사 자료나 기사에서 시작되었다면 병원이 고칠 수 없으므로 주소와 더해진 말을 기록으로 남깁니다. 병원이 들인 치료를 병원 밖 글이 어떤 우열의 말로 소개하는지를 목록으로 관리하는 방법은 병원 외부 출처 관리에서 다룹니다.

넘긴 지점이 병원이 낸 도입 소식이라면 실장이 그 문장의 주소를 넘기고, 고칠지는 원장이 의료진 검토를 거쳐 정합니다. 고친 뒤 AI 답이 달라진다고 약속하지는 않습니다. 새 치료나 장비를 들였다는 소식을 연구가 밝힌 결론의 범위 안에서 알리는 방법은 병원 보도자료에서 다룹니다.

우열의 말이 다른 결과에서 온 경우