확인 시기가 다른 GEO 성과 네 단계
병원 GEO 계약 검수일에는 글과 화면이 약속대로 만들어졌는지만 판정하고, 검색에 담기기와 인용, 방문은 검수 뒤 정한 주기로 이어서 관측합니다. GEO 작업의 성과는 한 번에 드러나지 않습니다. 네 단계를 거치고, 단계마다 점검할 수 있는 때가 다릅니다.
첫째는 만들기입니다. 글과 화면이 약속한 대로 만들어져 올라갔는지입니다. 올린 날 바로 확인할 수 있습니다.
둘째는 검색에 담기기입니다. 올린 글을 검색 쪽에서 읽어 가 목록에 넣었는지입니다. 이것은 올린 뒤 며칠에서 몇 주가 걸리고, 언제 담길지는 원내에서 정할 수 없습니다.
셋째는 인용되기입니다. AI 검색이 답을 만들 때 그 글을 가져다 쓰는지입니다. 담긴 뒤에도 시간이 더 걸리고, 같은 질문에도 날마다 답이 달라집니다.
넷째는 방문으로 이어지기입니다. 인용된 답을 보고 누리집으로 오시는지입니다. 가장 늦게 드러나고, 다른 요인이 가장 많이 섞입니다.
그래서 네 단계를 하루에 몰아 검수하면 앞의 것만 판정되고 뒤의 것은 아직 나오지 않은 상태로 판정됩니다. 뒤의 단계를 그날 없다고 판정하면, 아직 오지 않은 결과를 실패로 남기게 됩니다.
검수일 판정과 이후 관측의 구분
단계별로 언제 무엇을 보는지 정리하면 이렇습니다.
| 단계 | 언제 검토하나 | 계약 검수일에 판정하나 |
|---|---|---|
| 만들기 | 올린 날부터 | 판정한다. 약속한 것이 그대로 올라갔는지 본다. |
| 검색에 담기기 | 올리고 몇 주 뒤부터 | 판정하지 않는다. 확인을 시작한 날만 남긴다. |
| 인용되기 | 담긴 뒤 여러 주기에 걸쳐 | 판정하지 않는다. 관측할 질문과 주기를 정한다. |
| 방문으로 이어지기 | 인용이 보인 뒤 몇 달에 걸쳐 | 판정하지 않는다. 무엇으로 셀지 정한다. |
검수일에 판정하는 것은 첫째 줄뿐입니다. 나머지 셋은 그날 판정하지 않는 대신, 언제부터 어떻게 볼지를 그날 정합니다. 정해 두지 않으면 검수가 끝난 뒤 아무도 보지 않게 됩니다.
계약서에 따로 쓰는 검수와 관측
이 구분은 계약을 맺을 때부터 문서에 넣습니다. 검수일에 무엇을 판정하는지와, 그 뒤 무엇을 언제까지 관측하는지를 따로 씁니다.
검수 항목에는 만들기 단계의 것만 넣습니다. 몇 편을 올렸는지, 약속한 내용이 들어갔는지, 화면에서 제대로 열리는지처럼 그날 점검해 맞고 틀림을 가릴 수 있는 것입니다.
관측 항목은 뒤의 세 단계입니다. 어떤 질문으로 몇 주기마다 확인할지, 결과를 누가 어디에 남길지를 씁니다. 관측 항목은 목표 수치를 약속하는 것이 아니라 보는 방법을 약속하는 것입니다. 담기는지와 인용되는지는 원내에서 정할 수 없기 때문입니다.
둘을 한 줄에 묶어 두면 검수일에 뒤의 단계까지 판정해 달라는 요구가 나옵니다. 따로 써 두면 그날 볼 것과 이어서 볼 것이 처음부터 갈립니다.
검수일의 확인과 관측 시작 순서
검수일에 하는 순서입니다.
먼저 만들기 단계를 검증합니다. 약속한 편수가 올라갔는지, 글마다 약속한 내용이 들어갔는지, 화면에서 제대로 열리는지 확인합니다. 여기까지는 그날 맞고 틀림을 가립니다.
다음으로 검색에 담기기의 첫 점검을 합니다. 판정하려는 것이 아니라 시작점을 남기려는 것입니다. 올린 글 가운데 이미 담긴 것이 몇 편인지 세어 그날 날짜와 함께 남깁니다. 아직 담기지 않은 것은 실패가 아니라 기다리는 중입니다.
그리고 인용 관측을 어떻게 할지 정합니다. 물을 질문을 문장으로 정하고, 몇 주기마다 물을지, 결과를 어디에 남길지 정합니다. 질문은 뒤에 바꾸지 않을 것으로 정합니다. 중간에 문장을 바꾸면 앞의 결과와 견줄 수 없습니다.
그다음 방문을 무엇으로 셀지 정합니다. 누리집의 어느 기록에서 무엇을 셀지 정하고, 지금 값을 첫 값으로 남깁니다.
마지막으로 뒤의 세 단계를 언제 다시 볼지 날짜를 정합니다. 계약서에 그 날짜들을 함께 써 두면 검수가 끝난 뒤에도 관측이 이어집니다.
관측 날짜가 오면 그날 결과를 남기는 것에서 그치지 않고, 약속한 방법대로 봤는지도 함께 확인합니다. 질문 문장이 바뀌지 않았는지, 정한 주기를 지켰는지입니다. 방법이 달라졌다면 그 사실도 함께 남겨, 뒤에 결과를 읽는 사람이 앞과 견줄 수 있는지 가릴 수 있게 합니다.
단계별 증거와 없을 때의 방법
단계마다 남기는 증거입니다.
| 단계 | 남길 증거 | 없을 때 |
|---|---|---|
| 만들기 | 올린 글의 목록과 올린 날, 화면 확인 결과 | 검수일에 목록을 만들며 하나씩 연다. |
| 검색에 담기기 | 확인한 날과 담긴 편수 | 검수일을 첫 확인일로 삼는다. |
| 인용·방문 | 정한 질문과 주기, 주기별 결과 | 검수일에 질문과 주기를 정하고 첫 결과를 남긴다. |
둘째 줄은 날짜가 중요합니다. 담기는 데 걸리는 시간은 원내에서 정할 수 없으므로, 언제 올렸고 언제 확인했는지가 남아 있어야 늦어진 것인지 아직 기다릴 때인지 가릴 수 있습니다. 셋째 줄은 질문 문장이 중요합니다. 같은 뜻이라도 문장이 달라지면 답이 달라질 수 있으므로, 정한 문장을 그대로 남기고 매번 그 문장으로 묻습니다.
검수일에 인용까지 판정하려던 가상 사례
아래는 설명을 위해 만든 가상 사례입니다. 한 이비인후과 의원이 석 달 계약으로 글 열두 편을 맡겼고, 계약서에는 검수일 하루에 성과를 파악한다고만 되어 있었습니다.
검수일에 원내에서 네 가지를 모두 확인하려 했습니다. 만들기는 문제가 없었습니다. 열두 편이 약속한 내용으로 올라가 있었고 화면에서도 제대로 열렸습니다.
검색에 담긴 것은 열두 편 가운데 일곱 편이었습니다. 나머지 다섯 편은 마지막 주에 올린 것이었습니다.
인용은 정해 둔 질문이 없어 그날 몇 가지를 물어보았는데, 답에 의원 글이 나온 것은 한 번이었습니다. 방문은 무엇으로 셀지 정해져 있지 않아 알 수 없었습니다.
처음에는 인용과 방문이 기대보다 적다는 이야기가 나왔습니다. 그러나 표와 대조하니 검수일에 판정할 수 있는 것은 만들기뿐이었습니다. 담기기는 마지막 주에 올린 다섯 편이 아직 기다리는 중이었고, 인용과 방문은 볼 방법조차 정해져 있지 않았습니다.
그래서 그날 판정은 만들기 단계만 통과로 남기고, 나머지는 판정하지 않았습니다. 대신 인용을 볼 질문 다섯 개를 문장으로 정하고 달마다 한 번 묻기로 했습니다. 방문은 누리집 기록에서 AI 검색을 거쳐 들어온 수를 세기로 하고, 그날 값을 첫 값으로 남겼습니다.
석 달 뒤 다시 확인했을 때 담긴 글은 열두 편이 되었고, 정한 질문 다섯 개 가운데 두 개의 답에 의원 글이 나왔습니다.
다음 계약에서 바꾼 항목
이 일 뒤로 다음 계약서에 검수 항목과 관측 항목을 나누어 썼습니다. 검수 항목은 만들기 단계의 것만 넣고, 관측 항목에는 질문과 주기, 방문을 셀 방법을 넣었습니다.
관측 항목에는 목표 수치를 넣지 않았습니다. 담기는지와 인용되는지는 원내에서 정할 수 없으므로, 수치를 약속하면 지킬 수 없는 약속이 됩니다. 대신 정한 방법대로 보고 그 결과를 알린다는 것을 약속했습니다.
검수일에 판정하지 않은 세 단계도 기록에 남겼습니다. 판정하지 않았다는 것과 그 이유, 다시 볼 날짜입니다. 이 기록이 없으면 나중에 그날 인용이 적었다는 것만 남습니다. 다음 계약을 맺을 때 이 기록을 다시 열어, 검수일에 무엇을 판정하지 않았고 그 뒤에 무엇이 드러났는지 가렸습니다.
GEO 검수와 관측 자주 묻는 질문
Q1. 검수일을 늦추면 뒤의 단계까지 한 번에 판정할 수 있지 않나요?
A1. 늦출수록 만들기 단계의 판정도 늦어집니다. 글에 잘못된 것이 있어도 그만큼 오래 남습니다. 게다가 인용과 방문은 늦춘다고 한 날에 다 드러나지 않습니다. 만들기는 올린 뒤 곧 판정하고, 나머지는 날짜를 정해 따로 관측하는 편이 낫습니다.
Q2. GEO 성과의 관측 기간은 얼마로 정하나요?
A2. 몇 주기를 볼지로 정합니다. 담기는 데 걸리는 시간은 원내에서 정할 수 없어, 이 글에서 날수로 말씀드리기는 어렵습니다. 세 주기쯤 결과가 쌓여야 달라지고 있는지 말할 수 있으므로, 주기를 정하고 그 세 배를 첫 관측 기간으로 삼는 방법이 있습니다.
Q3. GEO 관측 결과는 누구에게 알리나요?
A3. 계약을 맺은 양쪽이 함께 받습니다. 원내에서 관측했다면 맡긴 곳에, 맡긴 곳이 관측했다면 원내에 결과를 보냅니다. 결과와 함께 물은 날과 정한 질문 문장을 함께 보내야 받는 쪽이 같은 방법으로 봤는지 가릴 수 있습니다.
Q4. 검수일에 만들기 단계에서 빠진 것이 나오면 어떻게 하나요?
A4. 빠진 것을 채운 뒤 그 부분만 다시 검수합니다. 뒤의 단계 관측은 채운 날부터 시작합니다. 빠진 글이 늦게 올라갔다면 그 글은 담기는 것도 늦어지므로, 관측을 시작한 날을 글마다 따로 남깁니다. 한꺼번에 올린 글과 늦게 올린 글을 같은 날짜로 묶으면 늦은 글이 뒤처진 것처럼 읽힙니다.
Q5. 검수 뒤 GEO 관측은 누가 맡나요?
A5. 계약에 적은 쪽이 맡습니다. 맡긴 곳이 관측한다면 원내에서도 정한 질문 가운데 몇 개를 같은 주기에 따로 물어 확인합니다. 두 결과가 다르면 물은 날과 조건을 서로 대조한 뒤 어느 쪽 기록을 기준으로 삼을지 정합니다.
나누지 않아도 되는 한 번짜리 작업
글을 올리는 것이 아니라 누리집의 한 화면을 고치는 일처럼 만들기로 끝나는 작업은 검수일 하루로 충분합니다. 담기기나 인용을 성과로 약속하지 않았다면 뒤의 단계를 관측할 까닭이 없습니다. 다만 그 화면을 고친 까닭이 인용을 늘리려는 것이었다면, 그 목적은 계약에 따로 쓰고 관측 항목을 넣습니다. 목적이 있는데 관측 항목이 없으면 고친 것이 들었는지 아무도 알 수 없습니다. 작업이 작더라도 목적과 점검 방법은 함께 남깁니다. 반대로 목적 없이 고친 화면이라면 검수일에 만들기만 확인하고 마치면 됩니다. 관측할 것이 없는데 관측 항목을 넣으면 확인하는 일만 늘어납니다.