클릭 깊이 3을 넘는 페이지, 크롤러는 조용히 포기합니다: AI 시대의 내부 링크 재설계

웹사이트의 성공이 백링크에 달려있다고 믿는 시대는 지났습니다. 물론 외부의 신뢰 시그널은 여전히 중요하지만, 정작 내부에서 권위(Authority)가 줄줄 새고 있다면 아무리 좋은 백링크를 받아도 소용없습니다. 특히 AI가 검색의 새로운 표준이 되면서, 잘 짜인 내부 링크 구조는 크롤링 효율을 넘어 ‘AI 답변 인용’의 핵심 조건으로 떠올랐습니다.

TL;DR

• 클릭 깊이(Click Depth) 3 이내: 홈페이지에서 중요 페이지까지의 클릭 횟수를 3회 이내로, 핵심 페이지는 2회 이내로 제한해야 합니다.
• 고아 페이지(Orphan Page) 제로화: 사이트 내 어떤 페이지에서도 링크되지 않은 ‘고아 페이지’를 완전히 제거하여 모든 콘텐츠가 크롤링 대상에 포함되도록 합니다.
• Pillar-Cluster 모델 적용: 주제별로 중심이 되는 ‘필라’ 페이지와 이를 뒷받침하는 ‘클러스터’ 페이지들을 촘촘히 연결하여 주제 전문성을 입증하고 크롤링 효율을 극대화합니다.

왜 내부 링크가 검색 순위와 AI 답변의 성패를 가르는가?

검색엔진 크롤러는 무한한 시간을 가지고 있지 않습니다. ‘크롤 예산(Crawl Budget)’이라는 한정된 자원 내에서 최대한 효율적으로 사이트를 탐색해야 합니다. 이때 내부 링크는 크롤러에게 길을 안내하는 ‘지도’ 역할을 합니다.

• 권위의 흐름 제어: 홈페이지가 가진 가장 높은 권위(PageRank)는 내부 링크를 통해 사이트 전체로 전달됩니다. 링크 구조가 복잡하고 깊으면, 권위가 하위 페이지까지 전달되지 못하고 중간에 소실됩니다.
• 크롤링 빈도 결정: 실제 진단해 보면, 홈페이지에서 클릭 한 번으로 도달할 수 있는 페이지는 거의 매일 크롤링되지만, 4~5번 이상 클릭해야 하는 페이지는 몇 주에 한 번 방문할까 말까 합니다. 이는 새로운 콘텐츠나 업데이트가 검색 결과에 반영되는 속도에 치명적인 영향을 줍니다.
• AI 답변의 핵심 근거: Google의 AI Overview나 Perplexity 같은 생성형 AI는 사용자의 질문에 답하기 위해 명확하고 권위 있는 정보 소스를 찾습니다. 이때 홈페이지에서 2클릭 이내에 위치한 핵심 콘텐츠는 AI에게 ‘중요한 정보’라는 강력한 신호를 보냅니다. 내부 링크 구조가 엉망이면 AI가 핵심 정보를 찾지 못해 인용될 기회 자체를 잃게 됩니다.

우리 사이트의 ‘링크 누수’ 지점, 어떻게 찾을까?

내부 링크 구조의 문제점을 파악하는 것은 기술 SEO의 첫걸음입니다. 다음 단계를 통해 사이트의 현황을 정밀하게 진단할 수 있습니다.

1. 전체 구조 크롤링 및 시각화: Screaming Frog, Sitebulb 같은 전문 도구나 저희 SearchTune OS의 진단 기능을 사용해 사이트의 모든 페이지와 링크 관계를 크롤링합니다. 이를 통해 링크 구조를 시각적으로 파악할 수 있습니다.
2. 클릭 깊이 분석: 크롤링 데이터를 기반으로 ‘클릭 깊이(Crawl Depth)’가 4 이상인 페이지 목록을 추출합니다. 이 목록에 비즈니스적으로 중요한 페이지(서비스 소개, 핵심 기능, 가격 정책 등)가 포함되어 있다면 심각한 문제입니다.
3. 고아 페이지(Orphan Pages) 식별: 크롤링된 페이지 중 내부 수신 링크(Inlinks)가 ‘0’인 페이지를 필터링합니다. 이들은 사이트맵을 통하지 않고는 크롤러가 절대 발견할 수 없는 페이지들입니다.
4. 주제 군집(Silo) 검토: 특정 주제의 페이지들이 서로 긴밀하게 연결되어 있는지, 관련 없는 주제로 링크가 새어 나가 권위가 분산되고 있지는 않은지 확인합니다.

예를 들어, Python의 BeautifulSoup 라이브러리를 활용하면 특정 페이지 내의 모든 링크를 추출하여 간단한 분석 스크립트를 작성해볼 수도 있습니다. 이것은 크롤러가 페이지를 어떻게 보는지 이해하는 데 도움이 됩니다.

'''
# 이 코드는 개념 설명을 위한 예시이며, 실제 환경에서는 더 정교한 방법이 필요합니다.
import requests
from bs4 import BeautifulSoup

def get_internal_links(url):
    internal_links = set()
    response = requests.get(url)
    soup = BeautifulSoup(response.text, "html.parser")
    for link in soup.find_all('a', href=True):
        href = link['href']
        if href.startswith('/') or "yourdomain.com" in href:
            internal_links.add(href)
    print(f"[{url}] 에서 발견된 내부 링크 수: {len(internal_links)}")
    return internal_links

# get_internal_links("https://yourdomain.com/some-page")
'''

피라미드와 필라-클러스터: 이상적인 내부 링크 아키텍처

문제를 파악했다면 이상적인 구조로 재설계해야 합니다. 현대 SEO에서 가장 효과적인 것으로 입증된 두 가지 모델은 ‘피라미드 구조’와 ‘필라-클러스터 모델’입니다.

• 피라미드 구조(Pyramid Structure): 가장 상위(꼭대기)에 홈페이지를 두고, 그 아래 주요 카테고리(Pillar), 그리고 가장 아래에 개별 콘텐츠(Cluster)를 배치하는 전통적이면서도 강력한 구조입니다. 모든 페이지는 상위 페이지로, 또 하위 페이지로 연결되며 위계를 명확히 합니다.

• 필라-클러스터 모델(Pillar-Cluster Model): 특정 주제에 대한 포괄적인 가이드인 ‘필라 페이지’를 만들고, 그 주제의 세부 사항을 다루는 여러 ‘클러스터 페이지’(블로그 글, FAQ 등)들이 필라 페이지를 향해 링크를 보내는 방식입니다. 이 모델은 특정 주제에 대한 사이트의 전문성을 입증하는 데 매우 효과적입니다.

두 모델의 핵심은 ‘주제적 연관성’과 ‘계층 구조의 명확성’입니다. 아래 표를 통해 좋은 구조와 나쁜 구조의 차이를 명확히 확인해 보세요.

💡 잠깐, 우리 사이트도 점검해 볼까요?

우리 사이트의 내부 링크 구조는 과연 건강할까요? 클릭 깊이가 너무 깊거나, 중요한 페이지가 고립되어 있지는 않은지 궁금하다면 SearchTune OS가 즉시 분석해 드립니다. 지금 바로 사이트의 숨겨진 문제점을 찾아보세요.

👉 무료 SEO·AEO·GEO 진단 받기

실전 적용: 링크 밀도와 앵커 텍스트 최적화

구조를 설계했다면, 개별 페이지의 링크를 최적화할 차례입니다. Google 공식 문서에서는 특정 숫자를 명시하지 않지만, 업계의 연구 결과에 따르면 몇 가지 효과적인 기준이 있습니다.

• 링크 밀도: 1,000단어 분량의 표준적인 콘텐츠에는 25개의 컨텍스트 내부 링크가, 2,000단어가 넘는 장문 콘텐츠에는 510개의 링크가 권장됩니다. 핵심은 ‘사용자에게 도움이 되는’ 관련 콘텐츠로 연결하는 것입니다.
• 앵커 텍스트: ‘여기를 클릭하세요’, ‘더보기’와 같은 의미 없는 앵커 텍스트는 SEO에 전혀 도움이 되지 않습니다. 링크가 가리키는 페이지의 핵심 키워드를 앵커 텍스트로 사용해야 합니다. 예를 들어, ‘다양한 기능은 여기서 확인하세요’ 보다는 ‘SearchTune OS의 SEO 분석 기능에 대해 알아보세요’가 훨씬 효과적입니다.
• 링크 위치: 페이지 본문의 상단 1/3 지점에 위치한 링크가 하단이나 사이드바 링크보다 더 많은 권위를 전달하는 경향이 있습니다.

✅ 실행 체크리스트

• 홈페이지에서 모든 중요 페이지까지의 클릭 깊이가 3을 넘지 않도록 조정
• 크롤링 도구로 ‘고아 페이지(Orphan Page)’ 목록을 추출하고 0개로 만들기
• 핵심 서비스를 ‘필라 페이지’로 지정하고 관련 하위 콘텐츠(블로그, 가이드)를 ‘클러스터’로 연결
• ‘더보기’, ‘여기를 클릭’ 같은 무의미한 앵커 텍스트를 모두 구체적인 키워드로 변경
• 1,000단어 이상 콘텐츠에 최소 5개 이상의 유의미한 내부 컨텍스트 링크 추가
• 사이트맵(sitemap.xml)을 다시 생성하고 Google Search Console, 네이버 서치어드바이저에 제출하여 변경된 구조 알리기
• 주요 페이지들의 상단에 핵심 요약 문단을 추가하여 AI 인용 가능성 높이기

내부 링크 구조 개선은 단 한 번의 작업으로 끝나는 것이 아닙니다. 콘텐츠가 추가되고 비즈니스가 성장함에 따라 지속적으로 점검하고 가꾸어야 하는 ‘웹사이트의 뼈대’입니다. 잘 설계된 내부 링크는 방문자와 검색엔진 모두에게 사랑받는 사이트의 핵심 기반이 될 것입니다. 지금 바로 여러분의 사이트 지도를 점검하고, 새어 나가는 권위를 붙잡으세요. SearchTune OS가 그 여정에 함께하겠습니다.

자주 묻는 질문

Q. 클릭 깊이(Click Depth)가 정확히 무엇이며, SEO에 왜 중요한가요?

클릭 깊이는 홈페이지에서 특정 페이지에 도달하기까지 필요한 최소 클릭 횟수를 의미합니다. Google과 같은 검색엔진은 클릭 깊이가 얕은 페이지를 더 중요하다고 판단하여 크롤링 빈도와 권한(PageRank)을 더 많이 할당하는 경향이 있습니다. Google의 전 직원이었던 Matt Cutts는 과거 영상에서 3클릭을 넘어가면 중요도가 낮아질 수 있음을 시사한 바 있으며, 이는 현재까지도 기술 SEO의 중요한 기준으로 통용되고 있습니다.

Q. 고아 페이지(Orphan Page)가 많으면 어떤 실질적인 불이익이 있나요?

고아 페이지는 어떤 내부 링크로도 연결되지 않은 페이지를 의미합니다. 검색엔진 크롤러는 링크를 따라 웹을 탐색하므로, 고아 페이지는 sitemap.xml에 명시적으로 제출되지 않는 한 발견 자체가 어렵습니다. 발견되더라도 다른 페이지로부터 어떠한 페이지랭크나 문맥적 신호를 전달받지 못해 ‘중요하지 않은’ 페이지로 분류됩니다. 이는 결국 해당 페이지가 검색 결과에서 거의 노출되지 않는 직접적인 원인이 됩니다.

Q. 필라-클러스터(Pillar-Cluster) 모델은 모든 웹사이트에 적용해야 하나요?

필라-클러스터는 특정 주제에 대한 전문성을 입증하는 데 매우 효과적인 구조입니다. 특히 여러 주제를 다루는 콘텐츠가 많은 블로그, SaaS, 미디어 사이트에 강력히 권장됩니다. HubSpot의 연구에 따르면 이 모델을 적용했을 때 검색 순위와 트래픽이 유의미하게 상승했습니다. 다만, 페이지 수가 10개 미만인 소규모 기업 소개 사이트나 단일 제품 페이지만 있는 경우에는 단순한 피라미드 구조만으로도 충분할 수 있습니다. 핵심은 주제별로 콘텐츠를 구조화하는 것입니다.

Q. 내부 링크와 외부 백링크 중 무엇이 더 중요한가요?

둘은 상호 보완적인 관계로, 우선순위를 논하기 어렵습니다. 외부 사이트로부터의 백링크가 제3자로부터의 ‘보증’이라면, 내부 링크는 사이트 소유자가 직접 검색엔진에게 ‘페이지 간의 관계와 중요도’를 알려주는 구조적 신호입니다. 잘 설계된 내부 링크 구조는 백링크로 얻은 권위를 사이트 전체에 효과적으로 분배하는 역할을 하므로, 둘 다 중요합니다. 실제 현장에서 분석해 보면, 강력한 백링크 1개의 효과를 극대화하기 위해 내부 링크 구조를 재설계하는 경우가 많습니다.

Q. AI 답변(AI Overview 등)에 인용되려면 내부 링크를 어떻게 활용해야 하나요?

AI 답변 생성 모델은 간결하고 권위 있는 정보를 선호합니다. 여러 SEO 연구 기관의 분석에 따르면, 홈페이지에서 2클릭 이내에 도달 가능한 페이지의 핵심 내용(Extractive passage)이 인용될 확률이 높습니다. 따라서 필라 페이지 상단에 주제에 대한 명확한 정의나 요약 단락을 배치하고, 해당 필라 페이지를 홈페이지나 메인 네비게이션에서 직접 링크하는 것이 유리합니다. 이는 AI가 해당 정보를 '중요하고 신뢰할 수 있다'고 판단하게 만드는 강력한 구조적 신호가 됩니다.

Q. 내부 링크를 수정하면 즉시 순위가 오르나요?

즉각적인 순위 상승을 보장하지는 않습니다. 내부 링크 구조 변경은 검색엔진이 사이트의 콘텐츠 관계와 중요도를 다시 평가하게 만드는 장기적인 최적화 작업입니다. 크롤러가 변경된 구조를 재수집하고, 링크 관계를 재계산하며, PageRank 흐름이 안정화되기까지는 수 주에서 수 개월이 걸릴 수 있습니다. Google Search Console의 '링크' 보고서에서 변경 사항이 반영되는 것을 확인하며 장기적인 관점에서 접근해야 합니다.