결론 쪽에서 세고 칸과 방향으로 묶는 셈
표 안의 값은 맞고 결론이 그와 반대로 말한 AI 답변은, 오류를 결론 쪽에서 세되 문장 수가 아니라 「표의 어느 칸을 어느 쪽으로 다르게 말했는가」를 한 건으로 셉니다. 같은 칸을 같은 쪽으로 다르게 말한 문장이 요약과 결론과 끝 권고에 세 번 나오면 모순은 한 건이고, 위치는 셋입니다. 보고서에는 이 두 숫자를 따로 씁니다. 표가 맞았다는 사실은 결론의 오류를 줄이지 않고, 결론의 오류가 표의 값을 틀린 것으로 만들지도 않습니다.
이 문제는 표를 옮기다 생긴 오류와 다릅니다. 표의 값이 병원 원자료와 다르면 응답이 자료를 잘못 가져온 것이고, 여기서 다루는 것은 맞게 가져온 자료를 같은 응답이 다르게 풀이한 경우입니다. 설명을 위해 꾸민 응답을 들면, 진료 시간표의 토요일 칸에는 「09:00~13:00」이 맞게 들어 있는데 표 아래 결론은 「토요일에는 진료하지 않습니다」라고 쓰고, 끝에서는 「토요일 방문은 피하는 편이 좋습니다」라고 권합니다. 두 문장은 같은 칸을 같은 쪽, 곧 휴진으로 다르게 말했으므로 한 건입니다.
문장 수로 세면 한 번의 잘못 풀이가 여러 오류로 부풀고, 건수만 쓰면 그 잘못이 응답 곳곳에 퍼졌다는 사실이 사라집니다. 건은 답이 왜 그렇게 썼는지가 아니라 화면에 나온 칸과 방향으로 정합니다. 답의 속사정은 진단 담당이 미루어 정하지 않습니다.
판정은 표 밖 문장 하나마다 매기며 값은 넷입니다. 아래 표의 줄을 위에서부터 차례로 묻고 처음 드는 줄에서 멈춥니다. 둘째 줄을 지난 뒤 짝 칸의 값이 원자료와 다르면 네 값 밖이므로 그 문장을 표 추출 오류 판정으로 넘기고 이 셈에서 뺍니다. 답이 표의 값을 스스로 거두고 다른 값을 낸 문장도 네 값 밖이어서 철회 판정으로 넘깁니다.
표 밖 문장의 네 판정
| 판정 | 차례로 묻는 조건 | 모순 셈 |
|---|---|---|
| 표에 짝 없음 | 문장이 말한 사실의 값이 든 칸이 같은 응답의 표에 없음(빈 칸 포함) | 넣지 않음 · 문장이 맞는지는 승인 사실 대조로 넘김 |
| 원자료 미확인 | 짝 칸은 있으나 그 칸 값을 병원 원자료와 맞대지 못함 | 넣지 않고 보류 |
| 표와 같음 | 짝 칸 값이 원자료와 같고, 문장도 그 칸과 같은 사실을 말함 | 넣지 않음 |
| 표와 엇갈림 | 짝 칸 값이 원자료와 같은데, 문장이 그 칸과 다른 사실을 말함 | 넣음 · 칸과 방향으로 건을 묶음 |
표와 같음과 표와 엇갈림은 모두 짝 칸이 원자료와 같다는 조건을 거친 뒤에만 매깁니다. 그래서 표와 엇갈림으로 센 건은 언제나 결론 쪽의 잘못입니다.
모순 건을 묶어 세는 다섯 단계
- 응답 전체를 질문, 서비스, 확인 시점과 함께 저장하고, 표와 표 밖 문장을 나눕니다. 표 밖 문장에는 머리 요약, 표 아래 결론, 끝 권고가 모두 들어가며, 문장마다 영역 이름과 문장 차례로 위치 이름을 답니다. 질문을 바꿔 넣은 다른 응답은 섞지 않습니다.
- 표 밖 문장 가운데 표가 다룬 사실을 말하거나 그 사실에 기대어 권하는 문장을 골라, 문장마다 짝이 되는 칸의 행과 열을 씁니다. 짝 칸이 없거나 비어 있으면 그 문장은 표에 짝 없음이고, 표의 값을 스스로 거두는 문장은 짝짓지 않고 철회 판정으로 넘깁니다.
- 짝으로 고른 칸만 병원 원자료와 맞댑니다. 맞대지 못하면 원자료 미확인, 칸 값이 원자료와 다르면 표 추출 오류 판정으로 넘깁니다.
- 원자료와 같은 칸에 짝지은 문장마다 표와 같음 또는 표와 엇갈림을 매깁니다. 문장이 칸과 다른 사실을 말했으면 그 문장이 칸 값을 어느 쪽으로 바꿨는지를 한 말로 씁니다. 휴진으로, 더 늦은 시각으로, 다른 진료과로 같은 꼴입니다.
- 표와 엇갈림 문장을 칸과 방향이 같은 것끼리 묶어 건을 만들고, 건마다 위치를 모두 옮깁니다. 끝으로 건수와 위치 수를 따로 셉니다.
둘째 단계에서 문장이 여러 칸을 한데 묶어 말하면 칸마다 따로 짝짓습니다. 평일 칸은 19:00까지, 토요일 칸은 13:00까지인데 결론이 「평일과 토요일 모두 저녁 7시까지」라고 했다면, 평일 칸과는 표와 같음이고 토요일 칸과는 표와 엇갈림입니다.
한 건으로 묶는 경우와 따로 세는 경우
| 표 밖 문장의 모습 | 건을 세는 법 | 위치를 옮기는 법 |
|---|---|---|
| 같은 칸을 같은 쪽으로 다르게 말한 문장이 여러 곳에 있음 | 한 건 | 그 건에 위치를 모두 씀 |
| 같은 칸을 서로 다른 쪽으로 다르게 말함 | 방향마다 한 건 | 건마다 그 방향의 문장 위치 |
| 한 문장이 두 칸과 엇갈림 | 칸마다 한 건 | 같은 위치를 두 건에 각각 씀 |
| 엇갈린 풀이를 그대로 받아 낸 권고 문장 | 그 칸과 방향의 건에 묶음 | 권고 문장의 위치를 덧붙임 |
넷째 줄의 권고는 칸의 값을 직접 말하지 않아도 엇갈린 풀이가 없으면 나올 수 없는 문장입니다. 토요일 방문을 피하라는 권고는 토요일 휴진이라는 풀이에서 나왔으므로 그 건의 위치로 들어갑니다. 머리 줄의 위치 수는 건마다 센 위치를 더한 값이 아니라 응답 안에서 표와 엇갈림으로 매긴 서로 다른 문장의 수입니다. 셋째 줄처럼 한 문장이 두 건에 들어가면 건수는 둘이 늘어도 위치 수는 하나만 늘어, 두 숫자가 저마다 다른 것을 셉니다.
건과 위치를 남기는 점검 기록
기록은 응답마다 머리 한 줄과 건마다 한 줄로 씁니다. 머리 줄에는 질문, 서비스, 확인 시점, 모순 건수, 모순 위치 수, 그리고 「건 줄의 짝 칸은 모두 원자료와 같음」을 씁니다. 마지막 칸이 있어야 받는 사람이 이 모순을 표를 옮긴 오류로 읽지 않습니다.
건 줄은 다섯 칸입니다. 첫째 칸은 건 번호, 둘째 칸은 표의 행과 열과 그 칸 값, 셋째 칸은 그 값이 있는 원자료의 위치, 넷째 칸은 결론이 바꾼 방향, 다섯째 칸은 위치 목록입니다. 위치 목록은 「머리 요약 첫 문장, 표 아래 결론 둘째 문장, 끝 권고」처럼 화면에 나온 차례대로 씁니다. 문장 글자는 판정에 필요한 만큼만 옮기고, 같은 문장을 건마다 되풀이해 옮기지 않습니다.
앞의 꾸민 응답이면 머리 줄은 「모순 1건 · 위치 2곳 · 건 줄의 짝 칸은 모두 원자료와 같음」이 됩니다. 건 줄은 「건 1 · 진료 시간표 토요일 행, 진료 시간 열 09:00~13:00 · 병원 누리집 진료 안내의 토요일 줄 · 휴진으로 · 표 아래 결론 첫 문장, 끝 권고」입니다. 받는 사람은 이 한 줄만으로 응답의 어디를 고쳐 읽어야 하는지와 병원 자료의 어디가 기준인지를 함께 알 수 있습니다.
표에 짝 없음과 원자료 미확인 문장은 건 줄에 넣지 않고 아래에 따로 묶어, 어느 대조로 넘겼는지나 무엇이 없어 보류했는지를 한 마디씩 씁니다. 이렇게 해 두면 모순 건수에 이 문장들이 섞이지 않습니다.
기록에 쓰지 않는 것도 있습니다. 답이 왜 결론을 다르게 냈는지의 추측, 읽는 사람이 표와 결론 가운데 어느 쪽을 믿었을지의 짐작은 쓰지 않습니다. 둘 다 화면 밖의 일이어서 같은 응답을 다른 담당이 다시 세면 달라질 수 있습니다.
건을 묶은 까닭도 건 줄 끝에 한 마디 남깁니다. 「같은 칸 · 같은 방향」이면 충분하고, 권고 문장을 묶었으면 「휴진 풀이에서 나온 권고」처럼 어느 풀이에 기댄 문장인지를 씁니다. 같은 응답을 다른 담당이 다시 셀 때 이 한 마디가 묶음이 같은지를 맞대는 기준이 됩니다.
병원에 넘길 때는 건마다 원자료 위치를 함께 보냅니다. 병원은 그 위치의 칸 둘레에 칸 값과 떨어진 조건 문장이나 주석이 있는지를 점검하고, 손질할지는 병원이 정합니다.
표와 결론의 모순 셈 자주 묻는 질문
결론이 「표에 따르면」이라고 하면서 표와 다른 값을 말했으면 다르게 세나요?
같은 판정입니다. 표를 근거로 든 말이 있어도 문장이 칸과 다른 사실을 말했으면 표와 엇갈림이고, 건을 묶는 법도 같습니다. 근거로 든 말은 위치 목록의 그 문장 옆에 그대로 옮겨, 받는 사람이 응답 안에서 표를 가리킨 곳을 찾게 합니다.
답이 결론에서 앞의 표가 틀렸다며 값을 고쳤다면 모순 건수에 들어가나요?
들어가지 않습니다. 이 문장은 철회 판정의 기록 칸에 씁니다. 거둔 칸의 값이 원자료와 같았다면 맞는 값을 거둔 경우로, 원자료와 달랐다면 틀린 값을 바로잡은 경우로 그 판정에서 가립니다. 모순 셈 기록의 머리 줄에는 철회로 넘긴 문장의 수만 한 마디 덧붙여, 응답 안에 셈 밖으로 나간 문장이 있었다는 것을 남깁니다.
같은 질문을 여러 번 넣어 응답마다 같은 모순이 나오면 모두 한 건으로 묶나요?
묶지 않습니다. 건은 한 응답 안에서만 셉니다. 응답이 셋이면 응답마다 머리 줄과 건 줄을 따로 쓰고, 같은 칸과 방향의 건이 몇 응답에서 나왔는지는 응답들을 모은 요약에 「세 응답 가운데 세 번」처럼 따로 씁니다.
한 응답에 같은 사실을 다룬 표가 둘 있고 두 칸의 값이 서로 다르면 어느 칸과 짝짓나요?
두 칸을 모두 원자료와 맞댑니다. 원자료와 같은 칸을 결론 문장의 짝으로 삼고, 다른 칸은 표 추출 오류 판정으로 넘깁니다. 둘 다 원자료와 다르면 그 결론 문장도 이 셈에서 빼고 두 칸과 함께 표 추출 오류 판정으로 넘깁니다.
결론이 표의 값을 어림해 말했으면 표와 엇갈림인가요?
어림한 값이 칸 값의 범위를 벗어나지 않으면 표와 같음입니다. 칸이 「13:00까지」인데 결론이 「오후 1시쯤까지」라고 했으면 같은 사실입니다. 어림이 칸 값을 넘어 「오후 늦게까지」처럼 13:00 뒤를 담는 말이 되면 더 늦은 시각으로 바꾼 표와 엇갈림입니다.
모순 건수를 계획에 넣는 일
건수와 위치 수를 병원 정보 손질의 계획 안에서 어떤 차례로 다룰지는 GEO마케팅 전략에서 함께 정합니다.