구글 서치 콘솔에서 ‘페이지 색인이 생성되지 않음’이 표시되더라도 모든 URL을 고쳐야 하는 것은 아닙니다. 삭제한 글의 404, 의도적으로 막은 관리자·검색 결과 페이지, 대표 URL이 따로 있는 중복 페이지는 색인되지 않는 것이 정상일 수 있습니다.
먼저 해당 URL이 검색에 반드시 노출되어야 하는 페이지인지 판단한 뒤, 서치 콘솔의 사유에 맞춰 조치해야 합니다. 이 글에서는 자주 보이는 네 가지 상태인 ‘NOINDEX 태그에 의해 제외되었습니다’, ‘사용자가 선택한 표준이 없는 중복 페이지’, ‘찾을 수 없음(404)’, ‘크롤링됨-현재 색인이 생성되지 않음’을 중심으로 해결 순서를 정리합니다.
[이미지 추천: 구글 서치 콘솔의 ‘페이지 색인 생성’ 보고서에서 색인이 생성되지 않은 이유를 확인하는 화면 캡처. 도메인 및 민감정보는 가린 이미지]
① 색인 제외가 모두 오류는 아닙니다
구글은 발견하거나 크롤링한 모든 URL을 검색결과에 등록하지 않습니다. 기술적으로 색인할 수 있는 페이지라도 구글이 중복 페이지로 판단하거나 검색결과에 포함할 필요가 낮다고 판단하면 색인하지 않을 수 있습니다. 사이트맵 제출과 색인 생성 요청 역시 크롤링과 색인을 보장하는 기능은 아닙니다.
| 서치 콘솔 상태 | 우선 확인할 내용 | 일반적인 대응 |
|---|---|---|
| NOINDEX 태그에 의해 제외 | 검색 노출이 필요한 페이지인지 | 필요한 페이지라면 noindex 제거 |
| 사용자가 선택한 표준이 없는 중복 페이지 | 구글이 선택한 표준 URL이 적절한지 | canonical·리디렉션·내부링크 신호 통일 |
| 찾을 수 없음(404) | 삭제된 URL인지, 주소가 바뀐 것인지 | 삭제면 유지, 이전이면 관련 새 URL로 301 |
| 크롤링됨-현재 색인이 생성되지 않음 | 중복·품질·내부링크·기술 설정 | 원인 개선 후 재크롤링 요청 |
보고서의 URL 수를 무조건 0으로 만드는 것이 목표는 아닙니다. 색인되어야 할 핵심 글이 제외된 경우만 우선적으로 수정하는 것이 좋습니다.
② ‘NOINDEX 태그에 의해 제외되었습니다’ 해결
▸ noindex란?
noindex는 검색엔진에 해당 페이지를 검색결과에 포함하지 말라고 지시하는 규칙입니다. HTML 문서의 <head>에 다음과 같은 태그가 있거나, 서버가 X-Robots-Tag: noindex HTTP 헤더를 보내는 경우 적용됩니다.
<meta name="robots" content="noindex, follow">noindex를 삭제하면 기본값이 index, follow이므로 반드시 별도의 index 태그를 추가할 필요는 없습니다. 자세한 작동 방식은 구글의 noindex 공식 안내에서 확인할 수 있습니다.
▸ 워드프레스에서 확인할 곳
- 사이트 전체 설정: 관리자 화면의 ‘설정 → 읽기’에서 ‘검색 엔진이 이 사이트를 검색하는 것을 차단’과 비슷한 항목이 체크되어 있다면 해제합니다.
- 개별 글 설정: 글 편집 화면의 Rank Math 고급 설정에서 Robots Meta가 ‘Index’인지 확인합니다. 플러그인 버전에 따라 메뉴 이름은 조금 다를 수 있습니다.
- 글 유형·아카이브 설정: Rank Math의 제목 및 메타 설정에서 글, 페이지, 카테고리, 태그 등의 기본 Robots Meta가 의도와 맞는지 확인합니다.
- 서버 응답 헤더: 화면의 meta 태그에는 문제가 없는데 noindex가 계속 감지된다면
X-Robots-Tag응답 헤더도 확인합니다.
검색 노출이 필요 없는 로그인, 내부 검색 결과, 테스트 페이지 등에 의도적으로 noindex를 설정했다면 수정하지 않아도 됩니다.
▸ 수정 후 처리 순서
- noindex 설정을 해제하고 캐시를 삭제합니다.
- 서치 콘솔 ‘URL 검사’에서 ‘실제 URL 테스트’를 실행합니다.
- ‘색인 생성 가능’ 상태라면 ‘색인 생성 요청’을 누릅니다.
- 페이지 색인 생성 보고서에서 여러 URL을 함께 수정했다면 ‘수정 결과 확인’을 시작합니다.
주의: robots.txt에서 URL을 차단하면 구글봇이 페이지에 접근하지 못해 새로 바꾼 noindex 또는 index 설정을 확인하지 못할 수 있습니다. 검색 노출이 필요한 페이지라면 robots.txt 접근도 함께 점검해야 합니다.
③ ‘사용자가 선택한 표준이 없는 중복 페이지’ 해결
▸ 이 상태의 의미
같거나 매우 비슷한 콘텐츠가 여러 URL로 제공되지만 사이트가 선호하는 대표 URL을 명확하게 지정하지 않았다는 뜻입니다. 구글이 다른 URL을 표준으로 선택해 정상 처리했을 수도 있으므로, 먼저 URL 검사에서 ‘Google에서 선택한 표준 URL’이 어느 주소인지 확인해야 합니다.
대표적인 중복 URL은 다음과 같습니다.
http://와https://주소가 모두 열리는 경우www와 non-www 주소가 모두 열리는 경우?utm_source=...등 추적 파라미터가 붙은 주소- 인쇄용 페이지나 정렬·필터 옵션으로 생성된 주소
- 내용이 거의 같은 태그·카테고리·아카이브 페이지
▸ 대표 URL 신호를 일관되게 맞추는 방법
- canonical 확인: 대표 글은 자기 자신을 가리키는 self-referencing canonical을 사용하고, 중복 페이지는 대표 URL을 가리키게 합니다.
- 301 리디렉션: 더 이상 사용할 필요가 없는 이전 주소는 가장 관련 있는 새 주소로 영구 리디렉션합니다.
- 내부링크 통일: 사이트 안의 링크가 중복 URL이 아닌 대표 URL을 가리키게 수정합니다.
- 사이트맵 정리: XML 사이트맵에는 색인시키려는 대표 URL만 포함합니다.
- 주소 체계 통일: HTTP/HTTPS와 www 사용 여부를 하나로 정하고 나머지는 대표 주소로 리디렉션합니다.
<link rel="canonical" href="https://wi-th.com/example-post/">canonical은 구글에 선호 URL을 알리는 강한 신호지만 절대적인 명령은 아닙니다. canonical, 리디렉션, 사이트맵, 내부링크가 서로 다른 URL을 가리키지 않도록 일치시키는 것이 중요합니다. 자세한 기준은 구글의 표준 URL 지정 가이드에서 확인할 수 있습니다.
▸ Polylang으로 한글·영문 글을 운영할 때
한글 글과 이를 번역한 영문 글은 단순 중복 페이지로 합치기보다 각 언어 URL이 자기 언어 페이지를 canonical로 지정하고, 서로를 hreflang으로 연결하는 구성이 일반적입니다. 영문 페이지의 canonical을 한글 페이지로 강제하면 영문 URL이 대표 페이지로 인정되지 않을 수 있습니다. 구글은 hreflang을 사용할 때 가능한 한 같은 언어의 canonical을 지정하도록 안내합니다.
④ ‘찾을 수 없음(404)’ 해결
▸ 404가 정상인 경우
삭제한 글이 더 이상 필요 없고 대체할 페이지도 없다면 404 또는 410 응답을 유지해도 됩니다. 구글은 시간이 지나면서 해당 URL을 검색결과에서 제거합니다. 이때 다음 항목만 정리하면 됩니다.
- XML 사이트맵에서 삭제된 URL 제거
- 사이트 내부의 깨진 링크 수정 또는 제거
- 메뉴, 카테고리, 이미지 링크에 이전 주소가 남아 있는지 확인
▸ 301 리디렉션이 필요한 경우
글의 슬러그를 변경했거나 같은 내용을 새 URL로 옮겼다면 이전 주소를 가장 관련 있는 새 주소로 301 리디렉션합니다. 워드프레스에서는 Redirection 플러그인이나 Rank Math의 리디렉션 기능을 사용할 수 있습니다.
모든 404 URL을 홈페이지로 보내는 방식은 피해야 합니다. 삭제된 페이지와 관련 없는 홈페이지로 일괄 이동시키면 사용자에게도 불편하고 구글이 소프트 404로 판단할 수 있습니다. 대체 페이지가 없으면 정상적인 404를 반환하는 편이 낫습니다.
▸ 주소는 열리는데 404로 잡힐 때
화면에는 내용이 보이지만 서버가 실제로 404 상태 코드를 반환하거나, 반대로 오류 안내 화면이 200 상태 코드를 반환하는 경우가 있습니다. URL 검사와 HTTP 상태 코드 확인 도구를 이용해 구글봇이 받은 응답을 확인하고, 정상 글이라면 200을 반환하도록 수정합니다.
⑤ ‘크롤링됨-현재 색인이 생성되지 않음’ 해결
▸ 이 상태의 의미
구글이 페이지를 방문했지만 현재 검색 색인에는 넣지 않았다는 뜻입니다. 반드시 수동 제재를 받았다는 의미는 아니며, 보고서에 한 가지 구체적인 원인이 표시되지 않을 수도 있습니다.
▸ 먼저 확인할 6가지
- 색인 허용 여부: noindex, robots.txt, 로그인 차단, 방화벽 또는 CDN 차단이 없는지 확인합니다.
- HTTP 상태: 정상 페이지가 200 응답을 반환하는지 확인합니다.
- canonical: 자기 자신이 아닌 다른 글을 표준 URL로 지정하고 있지 않은지 확인합니다.
- 중복성: 사이트의 다른 글과 제목·소제목·본문이 지나치게 유사하지 않은지 비교합니다.
- 콘텐츠의 실질적 가치: 검색자가 궁금해하는 내용을 직접 해결하고, 다른 글을 단순히 요약하거나 문장만 바꾼 수준을 넘는지 점검합니다.
- 내부 연결: 이미 색인된 관련 글, 카테고리 또는 허브 페이지에서 자연스러운 내부링크로 연결합니다.
구글에는 ‘최소 300~500단어’와 같은 공식 글자 수 기준이 없습니다. 억지로 분량을 늘리기보다 검색 의도를 충분히 해결하고, 직접 확인한 정보·구체적인 사례·명확한 절차처럼 독자에게 필요한 고유 가치를 보강하는 편이 중요합니다. 구글도 사람을 우선한 유용한 콘텐츠 안내에서 선호하는 특정 글자 수는 없다고 설명합니다.
외부 사이트의 백링크가 없다는 이유만으로 색인이 불가능한 것도 아닙니다. 외부 링크를 억지로 만들기보다, 사이트 안에서 중요한 글이 고립되지 않도록 관련 글끼리 연결하고 탐색 구조를 명확하게 만드는 것이 우선입니다.
▸ 수정 후 색인 요청
- 본문과 기술 설정을 실질적으로 수정합니다.
- 워드프레스와 LiteSpeed Cache의 캐시를 삭제합니다.
- URL 검사에서 실제 URL 테스트를 실행합니다.
- 문제가 없다면 색인 생성 요청을 누릅니다.
- 며칠 뒤 URL 검사와 페이지 색인 생성 보고서를 다시 확인합니다.
색인 생성 요청은 재크롤링을 요청하는 기능이지 색인을 보장하는 기능은 아닙니다. 반복해서 버튼을 누른다고 우선순위가 올라가는 것도 아니므로, 한 번 요청한 뒤 구글이 다시 처리할 시간을 두는 것이 좋습니다. 사이트맵 제출 역시 URL 발견을 돕는 신호일 뿐 색인을 보장하지 않습니다. 구글의 재크롤링 요청 안내에서도 변경된 URL은 URL 검사 도구나 사이트맵으로 알릴 수 있다고 설명합니다.
⑥ 확인할 권장 순서
- 서치 콘솔의 ‘페이지 색인 생성’ 보고서에서 사유별 URL 예시를 엽니다.
- 검색 노출이 꼭 필요한 글만 따로 구분합니다.
- URL 검사에서 사용자 선언 표준 URL과 Google 선택 표준 URL을 비교합니다.
- 워드프레스 ‘설정 → 읽기’와 개별 글의 Rank Math Robots Meta를 확인합니다.
- 슬러그를 바꾼 글은 관련 새 URL로 301 리디렉션하고 내부링크를 수정합니다.
- Rank Math가 만든 XML 사이트맵에 대표 URL만 포함되는지 확인합니다.
- 고립된 글에는 이미 색인된 관련 글에서 문맥에 맞는 내부링크를 추가합니다.
- 콘텐츠 또는 설정을 실제로 바꾼 뒤 URL 검사에서 색인 생성을 요청합니다.
site:wi-th.com 글제목 검색은 간단한 참고용으로 사용할 수 있지만, 검색 결과에 나오지 않는다고 곧바로 미색인으로 단정할 수는 없습니다. 개별 URL의 상태는 서치 콘솔의 URL 검사 결과를 우선 확인하는 것이 정확합니다.
❓ 자주 묻는 질문
Q. 색인 생성 요청을 누르면 언제 검색에 나오나요?
A. 정해진 보장 시간은 없습니다. 재크롤링과 처리에 며칠 이상 걸릴 수 있으며, 크롤링된 뒤에도 구글이 색인하지 않을 수 있습니다.
Q. 사이트맵에 URL이 있으면 반드시 색인되나요?
A. 아닙니다. 사이트맵은 구글에 발견·크롤링할 URL과 선호하는 대표 URL을 알리는 신호이며 색인을 보장하지 않습니다.
Q. 삭제한 글의 404도 모두 리디렉션해야 하나요?
A. 아닙니다. 관련 대체 페이지가 있을 때만 301 리디렉션하고, 대체 페이지가 없다면 404 또는 410을 유지해도 됩니다.
Q. Rank Math를 사용하면 canonical이 자동으로 설정되나요?
A. 일반적으로 게시물에는 canonical이 자동 출력되지만, 개별 글에서 사용자 지정 canonical을 입력했거나 다른 플러그인·테마가 중복 태그를 출력하는지 확인할 필요가 있습니다. URL 검사의 사용자 선언 표준 URL을 함께 확인하세요.
Q. 색인되지 않은 글은 삭제하고 다시 발행하는 게 좋나요?
A. 단순 재발행만으로 해결된다고 볼 수 없습니다. 기존 URL에서 원인을 점검하고 내용을 실질적으로 개선하는 것이 우선입니다. URL을 바꾸면 기존 신호와 내부링크까지 다시 정리해야 하므로 특별한 이유 없이 삭제·재발행하지 않는 편이 좋습니다.
✅ 결론
구글 서치 콘솔의 색인 제외는 사유에 따라 대응이 다릅니다. noindex는 검색 노출이 필요한 페이지에서만 해제하고, 중복 페이지는 canonical·301 리디렉션·내부링크·사이트맵의 대표 URL을 일치시켜야 합니다. 삭제된 페이지의 404는 정상일 수 있으며, ‘크롤링됨-현재 색인이 생성되지 않음’은 기술 설정과 중복성, 콘텐츠의 고유 가치, 내부 연결을 함께 점검해야 합니다.
가장 중요한 순서는 URL 검사로 현재 상태 확인 → 실제 원인 수정 → 실제 URL 테스트 → 색인 생성 요청 → 처리 대기입니다. 색인 요청이나 사이트맵 제출만 반복하기보다, 검색에 노출되어야 할 핵심 글부터 차근차근 정리해보세요.
