GEO 대행사 성과는 인용률 한 줄이 아니라 질문셋, 반복 측정, 신뢰구간, 원자료를 함께 받아 검증해야 합니다. 2026-08-19 실측에서 한 업종의 두 분야를 질문 1개씩 3회 측정했을 때 나온 0% 대 100% 판정은, 분야당 질문을 36개로 늘리자 50% 대 67%로 바뀌었고 두 신뢰구간은 겹쳤습니다. 구매자가 먼저 요구할 것은 좋은 숫자가 아니라 그 숫자를 다시 만들 수 있는 자료입니다.
왜 한 번 나온 인용을 성과로 볼 수 없을까?
AI 답변은 같은 질문에도 회차마다 달라질 수 있습니다. 한 번의 답변은 그 시점의 관측값일 뿐 변화의 크기나 안정성을 보여주지 못합니다. 질문마다 몇 회를 실행했는지, 매번 새 대화에서 시작했는지, 실패한 호출까지 분모에 남겼는지부터 확인해야 합니다. 같은 대화에서 후속 질문을 이어가면 앞선 답변과 출처가 다음 질문의 맥락에 남으므로 독립된 반복으로 보기 어렵습니다.
반복 횟수만 늘리는 것도 답은 아닙니다. 2026-08-19 계산에서 질의 안 관측의 급내상관이 0.77인 LLM 인용 측정은 같은 호출 예산 180회를 질문 60개에 3회씩 쓰면 유효표본이 71이었고, 질문 180개에 1회씩 쓰면 180이었습니다. 이 계산은 질의 안에서 관측이 군집된 측정에 한정되지만, 구매자가 질문 수와 질문당 반복 수를 따로 요구해야 하는 이유를 보여줍니다. 질문당 1회인 자료는 재현성을 판단할 수 없고, 질문이 지나치게 적은 자료는 시장 수요의 폭을 대표하기 어렵습니다.
질문셋에서는 무엇을 요구해야 할까?
첫째, 질문 전문과 선정 근거를 요구해야 합니다. 실제 검색 수요, 고객 상담 기록, 검색 제안어, 영업 문의처럼 출처가 있는 질문인지, 결과가 잘 나오는 질문만 임의로 고른 것인지 구분할 수 있어야 합니다. 질문을 추가하거나 뺀 날짜와 이유도 변경 이력으로 받아야 전후 비교에서 질문 구성이 몰래 바뀌지 않습니다.
둘째, 브랜드명을 넣은 질문과 넣지 않은 질문, 정보 탐색과 업체 탐색, 지역형과 전국형을 분리해 달라고 요청해야 합니다. 서로 다른 의도의 질문을 하나의 평균으로 합치면 어느 단계가 개선됐는지 알 수 없습니다. 계약 전에 기준 질문셋을 동결하고, 성과 측정 때 같은 문장과 같은 분류를 다시 쓰는 것이 출발점입니다.
셋째, 질문 수와 반복 횟수를 함께 받아야 합니다. 앞서 한 업종의 두 분야를 비교한 실측은 질문 1개씩 3회일 때 0/3 대 3/3이었지만, 질문 36개씩 3회로 넓힌 216개 응답에서는 18/36과 24/36이었습니다. 후자의 95% 신뢰구간은 각각 34~66%, 50~80%로 겹쳤습니다. 이 범위를 벗어나 전체 업종이나 다른 질문 유형의 차이로 확대해서는 안 되지만, 단일 질문의 극단값이 왜 계약 성과표가 되기 어려운지는 확인할 수 있습니다.
인용률은 어떤 형태로 받아야 할까?
단일 비율 대신 분자, 분모, 신뢰구간을 함께 요구해야 합니다. 예를 들어 인용된 질문 수인지, 인용된 응답 수인지, 검색을 실행한 응답만 센 것인지에 따라 같은 이름의 인용률도 뜻이 달라집니다. 질문별 결과와 전체 집계를 함께 받고, 전후 차이에도 구간을 붙여 우연한 흔들림과 구분해야 합니다.
검색 미실행, 호출 오류, 시간 초과, 응답 파싱 실패는 별도 칸으로 남겨야 합니다. 2026-08-19 지역 서비스업 추천형 질의 4건을 상용 LLM 1종에 실행한 실측에서는 동일 모델과 동일 프롬프트 4회 중 2회가 검색을 실행하지 않았습니다. 그 2회의 인용 도메인은 0곳이었지만 답변 본문에는 업체명 9개가 있었습니다. 이 표본 밖의 모델이나 업종으로 비율을 일반화할 수는 없지만, 검색하지 않은 회차와 검색했지만 선택되지 않은 회차를 같은 0으로 합치면 원인이 사라진다는 점은 분명합니다.
따라서 전체 응답 기준 인용률, 검색 실행 응답 기준 인용률, 본문 언급률을 따로 받아야 합니다. 못 잰 항목은 문제없음이 아니라 판정 불가로 표시하고, 분모에서 제외했다면 제외 건수와 사유를 함께 적도록 요구해야 합니다.
원자료에는 어떤 열이 있어야 할까?
요약 보고서만으로는 재검증할 수 없습니다. 호출 식별자, 측정 시각, 질문 전문, 새 대화 여부, 모델의 정확한 식별자와 버전, 검색 기능 설정, 검색 국가와 언어, 응답 전문, 검색 실행 여부, 출처 URL, 본문에 나온 브랜드명, 오류 상태가 행 단위로 있어야 합니다. CSV나 JSON처럼 다시 집계할 수 있는 형식으로 받고, 화면 캡처는 원자료의 보조 증거로만 쓰는 편이 좋습니다.
출처 URL은 도메인 이름만 받지 말고 실제 페이지 주소까지 요구해야 합니다. 구매자는 무작위로 몇 행을 뽑아 응답 전문에 그 URL이 실제 인용됐는지, 페이지가 측정 대상 브랜드를 다루는지, 리디렉션 뒤 주소가 무엇인지 확인할 수 있습니다. 호출 기록과 응답 전문이 없으면 대행사의 요약 규칙이 바뀌었을 때 과거 수치를 다시 계산할 방법이 없습니다.
측정 조건은 어디까지 고정해야 할까?
모델명만으로는 부족합니다. 모델 식별자와 버전, API나 웹 화면 같은 검색 표면, 검색 기능의 켜짐 여부, 국가와 언어, 측정 시점, 새 대화 여부를 함께 고정해야 합니다. 같은 질문셋을 다시 잴 때도 이 조건이 달라졌다면 전후 성과가 아니라 측정 도구가 바뀐 결과일 수 있습니다.
2026-08-15~16에 6개 업종의 지역형 20개와 전국형 4개씩, 총 144개 질의를 같은 제공사의 두 API 검색 표면에서 각각 3회 측정한 자료가 있습니다. 질문별 인용 도메인 겹침의 중앙값은 0.065였고 144개 중 48개는 겹침이 0이었습니다. 이 결과는 해당 업종과 API 표면에 한정되며 웹 앱과의 동일성을 말하지 않습니다. 다만 보고서에 검색 표면을 적지 않고 하나의 AI 노출로 합치면 서로 다른 모집단을 섞을 수 있다는 경고로는 쓸 수 있습니다.
검색 지역은 설정값과 실제 결과를 함께 확인해야 합니다. 한국어 질문이라는 이유만으로 한국 검색 결과라고 가정하지 말고, 국가와 언어 설정, 모델이 만든 검색어, 돌아온 출처 URL을 원자료에서 대조하도록 요청해야 합니다. 지역을 고정할 수 없는 측정이라면 그 사실과 영향 범위를 한계로 적어야 합니다.
흔한 착시는 어떻게 걸러낼까?
첫 번째 착시는 AI 크롤러 방문 수를 인용 성과처럼 제시하는 것입니다. 서버나 CDN 로그가 확인하는 것은 특정 봇이 특정 시각에 URL을 요청했다는 사실입니다. 답변이 그 페이지를 출처로 골랐다는 뜻은 아닙니다. 크롤 방문, 검색 후보 진입, 답변 인용, 본문 언급을 네 칸으로 나눈 표를 요구하면 단계가 섞이는 것을 막을 수 있습니다.
두 번째 착시는 같은 대화에서 질문을 이어가며 얻은 인용률입니다. 첫 답변에서 발견된 브랜드와 출처가 다음 답변의 맥락에 남을 수 있으므로, 각 반복은 기록이 없는 새 대화에서 시작하고 대화 식별자를 남겨야 합니다.
세 번째 착시는 지역이 고정되지 않은 측정입니다. 측정 지역이 달라지면 후보 웹도 달라질 수 있으므로, 한국어 질문이라는 표시만 보지 말고 국가 설정과 실제 출처를 확인해야 합니다. 지역을 재현할 수 없다면 지역 성과로 이름 붙이지 않는 것이 안전합니다.
구매자가 직접 다시 확인하려면 어떻게 할까?
먼저 서버나 CDN 로그에서 대행사가 제시한 기간의 AI 크롤러 방문을 직접 셉니다. User-Agent, 요청 경로, 시각, 상태 코드, IP 검증 방식을 확인하고 일반 크롤러와 사용자 질문 시점의 조회를 구분합니다. 이 값은 접근 여부를 확인하는 지표로만 두고 인용 실적과 합치지 않습니다.
다음으로 계약 때 동결한 질문 중 일부를 무작위로 고릅니다. 같은 모델, 검색 조건, 지역, 시점대를 맞추고 질문마다 새 대화를 열어 여러 번 실행합니다. 답변 전문, 출처 URL, 검색 여부, 브랜드 언급을 그대로 저장한 뒤 대행사 원자료의 집계 규칙으로 다시 계산합니다.
마지막으로 전후 자료를 나란히 놓고 질문셋, 반복 수, 모델 버전, 검색 표면, 지역, 실패 처리 중 하나라도 달라졌는지 확인합니다. 조건이 달라졌다면 성과 변화와 측정 조건 변화를 분리해 다시 보고해 달라고 요청해야 합니다. 계약서에는 원자료 제공 형식, 측정 주기, 판정 불가 처리, 재측정 절차까지 납품물로 적는 편이 좋습니다.
자주 묻는 질문 (FAQ)
Q. 인용률이 몇 퍼센트면 성과가 있다고 볼 수 있나요?
모든 업종에 통하는 기준값은 없습니다. 계약 전에 같은 질문셋과 조건으로 기준선을 만들고, 이후 값의 신뢰구간과 원자료를 함께 비교해야 합니다.
Q. 질문당 몇 번 측정해야 하나요?
1회로는 회차 변동을 확인할 수 없습니다. 반복 횟수뿐 아니라 서로 다른 질문의 수도 함께 확보하고, 각 반복을 새 대화에서 실행해야 합니다.
Q. 크롤러 방문이 늘었으면 GEO 성과 아닌가요?
접근 전제의 변화는 확인할 수 있지만 답변 인용이나 언급과는 다른 단계입니다. 서버 로그와 답변 원자료를 분리해 확인해야 합니다.
Q. 대행사가 원자료를 줄 수 없다고 하면 어떻게 하나요?
최소한 익명화한 호출 기록, 응답 전문, 출처 URL, 질문셋과 집계 규칙을 요구해야 합니다. 재계산할 자료가 없다면 요약 수치의 재현 가능성을 확인할 수 없습니다.
인트릭스의 무료 SEO·GEO 진단은 사이트의 접근성과 크롤 가능성을 실측해 시작점을 확인합니다. 다만 이 진단이나 후속 개선이 특정 AI 답변의 인용 또는 순위를 약속하지는 않으며, 답변 성과는 같은 질문셋과 조건으로 별도 반복 측정해야 합니다.