사전 등록 문서
사전등록: 인용→리드 전환 장치 실험 (ai-referral-conversion)
(주)인트릭스 · 결과가 나오기 전에 확정·공개했습니다
- 공개 등재: 2026-09-11 (/lab/preregistration/ai-referral-conversion). 특허 출원 접수 확인으로 출원 전 신규 공개 동결이 풀려 관측 종료(09-16 21:00 KST) 전에 등재했다. 본문의 지표·판정 규칙은 2026-09-02 등록 당시 그대로다.
등록 2026-09-02 21시대 (git 커밋 시각이 등록 시각 증명). 결과 관측 전에 지표와 판정 규칙을 잠근다. 공개 등록(/lab/preregistration)은 특허 출원(09-08 예정) 후 검토 - 이 실험 자체는 발명과 무관한 전환 장치 검증이지만, 출원 전 신규 공개 동결 원칙을 따른다.
질문
AI 인용·추천이 만든 방문(웹 유입·CLI 열람)이 무료 준비도 점검 신청으로 이어지는가. 2026-09-02 21시대 배포한 전환 장치 3종(AI 리퍼러 배너 · 메타 행동 문장 · CLI 독자 안내)이 그 간극을 줄이는가.
설계와 한계 (먼저 못박음)
단일군 전후 비교 관찰 연구다. 대조군이 없고, 같은 기간에 다른 개입 (상품명 교체 09-01, 3관문 언어 09-02, 칼럼 발행 주 3회)이 공존한다. 따라서 어떤 결과도 장치 3종의 인과 효과로 귀속하지 않는다. 이 실험이 답할 수 있는 것은 존재 증명까지다 - "AI 유입이 배너를 클릭하는가", "AI 경유 신청이 발생하는가".
표본이 작다. 기준선 AI 유입이 10주 7세션(주 0.7)이라 2주 관측 기대치가 1~2세션이다. 아래 판정 보류 규칙이 그래서 있다.
기준선 (2026-07-25 ~ 09-02 21:00 KST, 개입 전 확정)
- AI 웹 유입: 세션 7 · 페이지뷰 8 (의심·내부 제외)
- AI 경유 문의: 1건
- CLI 열람(claude-code UA): 26건, 그 경로에서 문의 0건 (원장 197)
- ref=ai-referral-banner 유입: 0건 (장치 배포 전이므로 당연)
사전 지정 지표 (관측 기간: 09-02 21:00 ~ 09-16 21:00 KST, 2주)
| 지표 | 정의 | 판정 |
|---|---|---|
| M1 노출 | AI 유입 세션 수 (traffic_medium='ai', 의심·내부·자동화 제외) | 기술 통계만 |
| M2 클릭 | ref='ai-referral-banner' 방문 수 | M1 대비 비율. M1 < 5 면 판정 보류 |
| M3 전환 | AI 경유(최초 또는 최종 터치) 문의·점검 신청 건수 | ≥1건이면 "경로 작동 확인"(존재 증명), 0건이면 "불충분" - 실패 단정 아님 |
| M4 CLI | claude-code UA 열람 수와 경로 | 기준선(주당 2.6건)과 추이 비교, 기술 통계만 |
판정 보류·연장 규칙: M1 < 5 이면 관측을 09-30 21:00 까지 연장하고 같은 규칙으로 1회만 재판정한다. 그래도 미달이면 "노출 표본 부족"으로 종결하고 장치는 유지한 채 분기 후 재검토한다. 연장은 1회뿐이다 - 원하는 결과가 나올 때까지 늘리는 것을 막는다.
바꾸지 않을 것: 관측 기간 중 장치 3종의 문구·위치·조건을 수정하지 않는다. 수정이 필요해지면 실험을 중단 처리하고 새 회차로 등록한다.
재측정 실행 방법 (2026-09-16)
지표 산출은 이 문서의 정의를 그대로 SQL 로 옮긴다. 기준선 산출에 쓴 조건과
동일해야 한다 (traffic_medium='ai' AND NOT is_suspect AND NOT is_internal 등).
판정 결과는 이 문서에 결과 절로 추가하고, 존재 증명이 나오면 원장에 적립한다.