AEO 감사를 실시하고 체크리스트까지 모두 완료한 뒤 가장 자주 막히는 지점은 ‘제대로 개선한 것이 맞는지’ 판단하기 어렵다는 것입니다. 문제는 여전히 SEO 대시보드만으로 AEO 성과를 확인한다는 데 있습니다. 키워드 순위가 오르지 않고 자연 검색 유입마저 줄면 그동안의 작업이 헛수고였다고 오해하기 쉽습니다. 하지만 실제로는 반대일 수 있습니다. AI 엔진에는 ‘검색 1위’라는 개념이 없습니다. 콘텐츠를 문장 단위로 나누고 조합해 답변을 생성합니다. 따라서 성과 측정의 기준도 순위가 아니라 다음 세 가지여야 합니다. AI가 콘텐츠를 크롤링했는가, 출처로 인용했는가, 답변에 포함했는가입니다.
검색 순위와 트래픽만으로 AEO 성과를 판단하지 마세요
전통적인 SEO의 인과관계는 명확합니다. 검색 결과 상위 3위에 오르면 클릭이 발생하고 웹사이트 유입으로 이어집니다. AEO에서는 이 연결 고리의 중간이 끊깁니다. 사용자가 ChatGPT나 Perplexity에 질문하면 엔진이 곧바로 답변을 구성합니다. 사용자는 답변만 읽고 처음부터 끝까지 웹사이트를 방문하지 않을 수 있습니다. 이를 제로 클릭이라고 합니다. 따라서 브랜드가 여러 차례 인용돼도 공식 웹사이트 트래픽이 같은 비율로 늘지 않는 것은 실패가 아니라 AEO의 일반적인 작동 방식입니다. GA의 자연 검색 유입만을 KPI로 삼으면 성과가 쌓이기 시작하는 시점에 프로젝트를 중단하는 실수를 할 수 있습니다.
3단계 지표로 성과를 나누어 확인하세요
AEO 성과는 크롤링, 인용, 노출로 이어지는 3단계 퍼널로 볼 수 있습니다. AI 엔진이 페이지를 먼저 ‘크롤링’해야 답변을 생성할 때 해당 페이지를 ‘인용’할 수 있고, 인용이 충분히 축적돼야 사용자의 질문에 대한 답변에서 브랜드가 ‘노출’됩니다. 어느 한 단계라도 막히면 이후 단계에서는 성과가 발생하지 않습니다. 감사 후 측정의 핵심은 어느 단계까지 정상적으로 작동하고 있으며 어디가 여전히 막혀 있는지 확인하는 것입니다.
- 크롤링 단계(Crawl): AI 크롤러가 페이지를 정상적으로 수집했는지, 어떤 페이지를 수집했는지, 얼마나 자주 다시 방문하는지 확인합니다.
- 인용 단계(Citation): AI가 생성한 답변에서 우리 사이트가 출처로 제시되는지, 어떤 페이지가 인용되는지 확인합니다.
- 답변 가시성(Answer Visibility): 중요하게 관리하는 질문 가운데 답변에 브랜드가 등장하는 비율, 즉 답변 점유율을 측정합니다.
크롤링 단계: AI 크롤러가 실제로 접근할 수 있는지 먼저 확인하세요
가장 자주 건너뛰지만 가장 먼저 측정해야 하는 단계입니다. 서버 액세스 로그를 열고 AI 크롤러의 사용자 에이전트를 필터링합니다. OpenAI의 GPTBot과 OAI-SearchBot, Anthropic의 ClaudeBot, Perplexity의 PerplexityBot, AI 학습 및 AI Overviews와 관련된 Google의 Google-Extended가 대표적입니다. 여기서 세 가지 질문에 답해야 합니다. 크롤러가 방문했는가, 어떤 페이지를 수집했는가, 404 오류가 대량으로 발생했거나 robots.txt에 의해 차단되지는 않았는가입니다. 실제 감사에서 가장 흔히 발견되는 문제는 고객사의 robots.txt나 CDN 방화벽이 일부 AI 크롤러를 조용히 차단하는 경우입니다. 이런 상태에서는 콘텐츠의 품질이 아무리 뛰어나도 모델의 시야에 들어갈 수 없습니다.
인용 단계: AI가 우리 콘텐츠를 출처로 인용한 횟수를 추적하세요
인용 단계에서는 두 가지 신호를 추적해야 합니다. 첫째는 추천 트래픽입니다. GA4에서 chatgpt.com, perplexity.ai, gemini.google.com, copilot.microsoft.com을 별도 소스 그룹으로 묶어 AI 답변의 출처 링크를 통해 방문한 사용자가 있는지 확인합니다. 이 유입의 규모는 대체로 작지만 의도가 매우 뚜렷하며, 전환율도 일반적인 자연 검색 유입보다 높은 경우가 많습니다. 둘째는 인용률입니다. 같은 질문 묶음을 AI에 입력한 뒤 답변의 출처 목록에 자사 도메인이 등장한 비율을 기록합니다. 전자는 인용을 통해 실제로 발생한 클릭을, 후자는 인용 자체의 빈도를 보여줍니다. 제로 클릭 때문에 추천 트래픽만으로는 실제 영향력을 항상 과소평가하게 되므로 두 지표를 모두 추적해야 합니다.
노출 단계: 질문에 대한 답변 점유율을 측정하세요
이 단계는 비즈니스 성과에 가장 가깝지만 자체적으로 측정하기는 가장 어렵습니다. 먼저 구매자가 실제 도입 검토 과정에서 물어볼 질문을 정리합니다. 제품 카테고리, 고객의 문제, 비교 질문을 기준으로 보통 수십 개에서 수백 개의 질문을 구성합니다. 그런 다음 이 질문 묶음을 정기적으로 주요 AI 엔진에 입력하고 두 가지를 기록합니다. 답변에서 브랜드가 언급되는지, 그리고 그 서술이 긍정적인지, 중립적인지, 추천하지 않는 대상으로 분류하는지입니다. 이를 답변 점유율로 환산하면 월별로 비교할 수 있는 추세선이 만들어집니다. 수십 개 질문은 수작업으로도 측정할 수 있습니다. 그러나 수백 개 질문을 여러 엔진에서 반복 실행하고 추세까지 추적하려면 지속적인 모니터링 도구가 필요합니다. 이것이 바로 당사의 AI 가시성 모니터링(visibility tracking)이 다루는 영역입니다.
성과를 논하기 전에 기준선부터 설정하세요
모든 지표는 감사 시점에 한 차례 측정해 기준선으로 삼아야 합니다. 기준선이 없으면 이후 수치만으로는 개선됐는지 악화됐는지 판단할 수 없습니다. 측정 주기는 크롤링 단계의 서버 로그를 주 1회 확인하고, 인용 및 노출 단계는 월 1회 측정하는 것이 적절합니다. AI 엔진이 답변을 업데이트하기까지는 시차가 있으므로 지나치게 자주 측정하면 추세가 아니라 노이즈만 보게 됩니다. 프로젝트 전체의 합리적인 기대치는 크롤링 단계가 보통 몇 주 안에 반응하고, 인용 및 노출 단계는 추세를 확인하기까지 1~3개월이 걸리는 것입니다. 모델이 콘텐츠를 다시 크롤링하고 재통합해야 답변에 포함할 수 있기 때문입니다.
AI 엔진은 브랜드의 순위를 알려주지 않습니다. 답변에 포함할지 여부만 결정합니다. 측정의 역할은 ‘답변에 포함됐는가’를 확인하고, 이를 지속적으로 추적할 수 있는 수치로 바꾸는 것입니다.
이런 측정 오류는 피하세요
- 한 번만 질문하고 결론 내리기: AI 답변에는 변동성이 있습니다. 같은 질문을 3회 또는 5회 반복해 안정적으로 등장하는 내용을 기준으로 판단해야 합니다.
- 메모리 기능을 켠 개인 계정으로 테스트하기: 개인화가 결과를 왜곡할 수 있습니다. 로그아웃 상태이거나 기록이 없는 깨끗한 환경을 사용해야 합니다.
- 브랜드 질문만 추적하고 비브랜드 질문은 제외하기: 진짜 기회는 아직 브랜드를 모르는 사용자가 자신의 문제만 설명하는 질문에 숨어 있습니다.
- 트래픽 감소를 곧바로 실패로 판단하기: 실제 가시성이 낮아진 것인지, 제로 클릭으로 인해 웹사이트 클릭만 줄어든 것인지 먼저 확인해야 합니다.
처음부터 3단계 측정에 별도 도구가 필요한 것은 아닙니다. 서버 로그와 수작업으로 작성한 질문 목록만으로 시작해도 ‘감사에서 발견한 문제를 제대로 개선했는가’에 솔직하게 답할 수 있습니다. 진짜 어려운 과제는 측정 자체가 아니라 세 단계의 지표를 하나의 대시보드로 연결해 경영진에게 성과를 설명하고 다음 콘텐츠 개선 방향을 제시하는 것입니다. 현재 어느 단계에서 성과가 새고 있으며 무엇부터 고쳐야 하는지 알고 싶다면 30분 GEO 진단을 예약하세요. 실제 도메인과 질문을 바탕으로 현장에서 3단계 지표를 보여드립니다.
