GEO 점수가 올랐는데 질문이 바뀌었다…10월 리포트 점검법

9월 논문이 던진 질문

Olivier Martinez가 2026년 9월 6일 공개한 Measuring GEO Visibility는 질문 집합과 질문별 가중치가 어떤 답변 시장을 측정하는지 결정한다고 설명한다. 그 집합이 실제 이용자 수요를 대표한다는 보장은 없다. 문구를 바꾸면 검색과 답변이 달라질 수 있고, 답변을 채점하는 모델의 지시문도 점수에 영향을 줄 수 있다는 논의다.

이 자료는 기존 연구를 검토하고 계산 예시로 측정 문제를 분석한 방법론 논문이다. 새 실험을 보고하지 않았으며 일반적인 실증 타당성은 추가 평가가 필요하다고 명시했다. 따라서 특정 질문 설계가 국내 병원이나 로펌의 문의를 얼마나 늘린다는 수치로 읽을 수는 없다. 이 기사에서는 해당 문제 제기를 바탕으로 편집부가 월간 보고서의 실무 점검 항목을 제안한다. 원문 확인일은 2026년 10월 10일이다.

같은 질문을 비교하고 있는가?

월별 점수를 비교하려면 질문 문구와 묶음, 합산 비중이 같았는지 먼저 확인해야 한다. 새 질문을 추가하는 것은 유용하지만 기존 질문의 변화와 함께 섞으면, 실제 답변이 달라졌는지 측정 대상이 달라졌는지 구분하기 어렵다.

가령 브랜드명을 직접 넣은 질문은 이용자가 이미 그 회사를 알고 있는 상황을 가정한다. 지역과 업종만 넣은 추천 질문은 아직 업체를 고르지 않은 상황이다. 둘 다 사업에 중요할 수 있지만 해결하려는 문제가 다르다. 인지도 확인과 신규 발견을 한 평균으로 묶으면 어느 쪽이 개선됐는지 알기 힘들다.

실무에서는 질문 목록에 바뀌지 않는 식별자를 붙이고 문구 변경 이력을 남겨 보자. 계속 관측한 질문은 전월과 비교하고, 새 질문은 이번 달 기준값으로 표시하는 방식이다. 질문을 삭제했다면 삭제 이유도 남긴다. 대답이 잘 나오지 않는 질문만 빼고 나머지 평균을 보여 주는 상황을 점검할 수 있다.

언급과 인용, 사이트 방문을 다른 칸에 두자

브랜드명이 답변에 들어갔다는 것, 우리 페이지로 연결되는 출처가 달렸다는 것, 그 링크로 방문했다는 것은 서로 다른 사건이다. 브랜드를 소개하면서 타사 페이지를 출처로 쓸 수 있고, 우리 페이지가 출처여도 브랜드 이름은 본문에 없을 수 있다. 어느 사건을 목표로 삼았는지 계약 단계의 정의를 확인해야 한다.

보고서 항목	편집부가 권하는 확인 질문	필요한 기록
브랜드 언급	본문과 장소 카드 중 어디에 이름이 나왔나	답변과 화면의 해당 부분
출처 인용	링크가 우리 도메인인가, 실제 대상 페이지인가	인용 URL과 연결된 문장
답변 내용	원하는 서비스 정보가 정확히 설명됐나	원문 대조 결과
방문·문의	어떤 경로로 들어와 어떤 행동을 했나	유입 분석과 문의 기록

표는 업계의 단일 표준이 아니라 보고서를 읽기 위한 편집부 제안이다. 하나의 점수를 쓰더라도 그 안에 어떤 항목이 들어갔는지 설명을 받아야 한다. 특히 방문이나 문의 자료를 확인하지 않은 상태에서 인용 증가를 매출 증가로 바꿔 설명하면 서로 다른 단계를 건너뛰게 된다.

반복 측정이 해결하는 것과 못 하는 것

Don’t Measure Once는 AI 검색 답변이 실행·질문·시점에 따라 달라질 수 있으므로 단발 관측을 대표 결과로 읽기 어렵다고 설명한다. 반복 측정은 이런 흔들림을 살피는 데 필요하다. 하지만 잘못 정한 질문을 많이 반복한다고 그 질문이 고객 수요를 대표하게 되지는 않는다.

편집부는 두 점검을 나눠 하기를 권한다. 먼저 질문이 사업 목표와 연결돼 있는지 보고, 다음으로 같은 질문을 일관된 조건에서 충분히 관측했는지 살핀다. 적정 반복 횟수는 원하는 오차와 지표, 엔진에 따라 달라질 수 있다. 임의로 정한 횟수를 모든 엔진의 정확도를 보장하는 숫자로 쓰지 않는다.

10월 보고서를 받으면 이 순서로 확인한다

첫 장의 상승 그래프보다 질문 목록을 먼저 열어 보자. 고정 질문과 추가·삭제 질문을 구분하고, 비교 기간과 엔진·접속 경로·지역·언어 조건을 확인한다. 조건이 바뀐 구간은 같은 선으로 매끄럽게 연결하기보다 변경 사실을 표시하는 편이 해석에 도움이 된다.

그다음 합산 전 질문별 결과를 읽는다. 전체 평균이 올랐더라도 가장 중요한 구매·상담 질문이 그대로일 수 있다. 마지막으로 수행한 작업과 결과를 연결해 다음 달 과제를 정한다. 어떤 페이지를 바꿨는지, 그 뒤 어느 질문에서 어떤 답변 변화가 관측됐는지 적되, 동시에 바뀐 다른 요인이 있으면 해당 작업만의 효과로 확정하지 않는다.

보고서의 목표는 좋은 숫자를 보여 주는 데서 끝나지 않는다. 다음에 무엇을 고치고 무엇을 더 관측할지 결정할 수 있어야 한다. 질문 목록이 보이지 않는 종합 점수라면, 먼저 그 점수를 구성한 질문부터 요청하는 것이 출발점이다.