구글 검색 콘솔 발견됨 - 현재 색인이 생성되지 않음 삽질기

며칠째 구글 검색엔진 색인 생성 문제로 삽질을 하고 있다.

이 글은 ‘발견됨 - 현재 색인이 생성되지 않음’ 상태에서 삽질한 기록을 담은 기록.

우피나 불렛으로 홈페이지를 제작하면 색인이 잘되는데 자체 개발한 사이트는 색인이 쉽지가 않다.

아이러니한 것은 아예 색인이 안되는 것도 아니고, 일부 페이지만 색인이 된다는 것.

일부만 색인되어 있는 내 사이트#

ctrltime site indexing status 서브 도메인이 적용된 독서모임 사이트의 메인페이지 1개, 그리고 지금의 메인 사이트의 카테고리 페이지들과 포스팅 1개가 색인 되어 있다.

하지만 이 블로그에 작성된 글이 10개가 넘어가는데도 불구하고 딱 1개의 글만 색인되는 상황.

더군다나 독서모임 사이트에도 블로그 글이 10개정도 작성되어 있다. 그럼에도 색인은 되지 않는 상태.

Sitemap과 robots 파일#

첫 번째로 확인한 것은 Sitemap과 robots.txt 파일. 검색엔진이 크롤링 할 때의 규칙과 사이트 정보를 담은 파일들인데, 확인했을 때는 모두 정상이었다.

사이트 검사 도구 여러개 돌려봐도 검색엔진 최적화는 정상인 편이었다.

Page Speed Insight
SEO CheckUp SEO Check up 사이트에서 렌더 블로킹 문제가 있다고 해서 해당 부분 조치도 해둔 상황.

캐노니컬 태그#

캐노니컬 태그도 게시글별로 잘 생성되는지 확인했다.

캐노니컬 태그가 뭘까?
이 태그는 중복된 페이지가 있을 때, 뭐가 대표하는 페이지인지 URL을 지정해주는 것을 뜻하는데, SEO 관점에서 URL 관리를 신경쓰고 있다고 판단하여 좋은 점수를 받기 좋다.

주의사항
다른 글임에도 불구하고 여러 페이지에 동일한 canonical url이 들어가지 않도록 주의해야 한다.

클라우드 플레어#

보안 설정과 관련해서 클라우드 플레어의 세팅을 의심해볼 수 있다고 해서 이 부분도 알아보았다.

클라우드 플레어의 세부 설정을 어떻게 하느냐에 따라 또 차이가 있다.

block ai bot setting AI Bot을 차단하는 부분도 있는데, 아무 차단도 시키지 않았고, bot crawl setting AI 크롤링 허용을 했음에도 별다른 진전이 없다. (클로드 봇은 가져가네)

URL 검사#

url inspection URL 검사를 하면, 참조 사이트맵 및 페이지가 없다고 나오며, ‘해당사항 없음’이 많이 보인다.

real url test 그래서 실제 URL 테스트를 해보면 url test result 등록할 수 있다고 나온다. tested page result screenshot 테스트 된 페이지 보기의 HTML 및 스크린샷도 정상적으로 보인다. index request complete 색인 생성 요청도 완료.

하지만 위 작업을 한다고 해서 사이트 검색이 바로바로 되는 것도 아니다.

검색엔진 봇이 내 글을 색인할 때까지 계속 기다리고 있을 수 없는 노릇.

고객센터 문의#

구글은 문의를 남길 수 있는곳 없나 이리저리 찾아봤지만, 없었다.

대신 커뮤니티에 질문 남기는건 가능한데, 이미 이 문제를 겪어본 사람들이 이런저런 글을 써뒀다.

하지만 이렇다할 명쾌한 해결책이 담긴 글은 발견하지 못했다.

google suggestion 구글 검색콘솔 좌측 하단에 의견 제출하기라는 버튼을 누르면 이런 의견을 내볼 수 있는 것을 발견해서 이것도 해보고.

bing webmaster support center 빙 웹마스터 도구의 고객센터에도 문의를 남겨두었다.

구글 ‘발견됨 - 현재 색인이 생성되지 않음’ 문제 결론#

일단 글을 쓸 것!
원인을 파고들다 보니 이것저것 시도하면서 시간을 많이 썼는데, 결국 중요한 것은 내가 글을 쓰고, 누군가에게 정보를 전달하고 하는 행동이다. 색인을 기다리기 보다, 글을 쓰고 이미 존재하는 플랫폼들에 내 사이트들을 알리면서 백링크를 남기는 행동을 하다보면 색인이 되지 않을까 싶다.

문제 원인을 지금 당장 명확히 알고 싶다는 욕구를 내려놓기로 했다.

언제 올 지 모르는 고객센터의 답변을 기다리는 대신, 내가 할 수 있는 일에 집중하는 게 정신건강에 이로울 듯 하다.

혹시나 고객센터에서 명쾌한 답변이 온다면 이 글을 업데이트 해둘 예정.

구글 검색 콘솔 색인 생성되기 시작#

2026/05/14 목요일, 문제가 해결되었다.

최근 발행한 글이 구글에 노출되기 시작한 것.

이 글을 쓰고 추가로 취한 조치들도 기록해둔다.

robots.txt 업데이트#

명시적으로 크롤러 이름을 포함하여 User-agent에 추가했다.

1
User-agent: *
2
Allow: /
3

4
User-agent: GPTBot
5
Allow: /
6

7
User-agent: OAI-SearchBot
8
Allow: /
9

10
User-agent: ChatGPT-User
11
Allow: /
12

13
User-agent: ClaudeBot
14
Allow: /
15

16
User-agent: Claude-SearchBot
17
Allow: /
18

19
User-agent: PerplexityBot
20
Allow: /
21

22
User-agent: Google-Extended
23
Allow: /
24

25
User-agent: CCBot
26
Allow: /
27

28
Sitemap: 사이트맵 주소

CSS 렌더링#

포스팅을 할 때, 마크다운 편집기를 활용하면서 관련 스타일을 활용하고 있었다.

사이트 검사를 했을 때, Lagest Content 부분이 렌더링을 차단하고 있는 등의 메시지를 발견했다.

AI의 도움을 받으며, 블로그 본문에 대한 스타일 관련 스크립트를 전역이 아닌 inline으로 처리하는 등 렌더링 차단 요소를 최소화 하는 방향으로 조정했다.

URL 제출#

위 작업 후 배포까지 한 뒤, URL 제출하고 몇 시간이 지나지 않아 해당 글들이 색인이 생성되기 시작했다.

명시적으로 Robots.txt에 허용 봇을 적어주어서인지
CSS 렌더링 최적화 작업을 해서인지

정확히는 모르겠지만… 일단 중요한 것은 글을 쓰는 것이니 해결된 것으로 간주하고 넘어가기로.