'색인이 생성되었으나 robots.txt에 의해 차단됨' 문제 해결 방법

안녕하세요. 로빈후드입니다.

티스토리를 운영하다보면, 

 

정확히는 구글 서치 콘솔(Google Search Console)에 연동시켜놓으면 가끔 

심장 '쿵!'하는 희한한 제목의 메일들을 여럿 접하게 되는데요.

(그 사람이 바로 나에요)

 

네, 저도 그 메일 받았습니다!

 

 

 

'사이트에서 새로운 색인 생성 범위 문제가 발견됨'

"어-이 처신 잘하라고"와 같은 제목의 메일이네요.

 

아주 매섭습니다.

메일의 내용을 좀 살펴보니,

티스토리 블로그 소유자님께, Search Console이 사이트에서 1개의 색인 생성 범위 문제를 발견했습니다.

'색인이 생성되었으나 robots.txt에 의해 차단됨'

라고 하네요.

어.. 그러니까 포스팅한 내용의 색인이 생성됐는데, 자동으로 구글쪽에서 차단했다는건가?

일단 무슨말인지 잘 모르겠으니,

'색인 생성 범위 문제 해결하기'를 클릭해서 무슨 문제인지 확인해보러 갑시다!

 

유효성 검사를 시작한 상태

 

 

으음.. 일단 들어오긴 했는데.. 뭐가 문제인거지?

 

 

'세부정보 보기'를 클릭해볼까요?

 

 

 

 

제출된 URL이 robots.txt에 의해 차단됨: 색인 생성을 위해 이 페이지를 제출했지만 

사이트의 robots.txt 파일에 의해 페이지가 차단되었습니다.

1.예시 표의 페이지를 클릭하여 도구 측면 패널을 펼칩니다.

2.robots.txt 차단 테스트를 클릭하여 URL에 robots.txt 테스터를 실행합니다. 

도구에서 URL을 차단하는 규칙을 강조표시합니다.

3.필요한 경우 robots.txt 파일을 업데이트하여 규칙을 삭제하거나 변경합니다.

 

robots.txt 테스트 도구에서 사용 중인 robots.txt 보기를 클릭하여 이 파일의 위치를 찾을 수 있습니다.

웹 호스팅 서비스를 사용 중이고 이 파일을 수정할 권한이 없다면 서비스의 도움말을 검색하거나

호스팅 서비스의 고객센터에 문의하여 문제에 관해 알려 주세요.

 

 

 

뭔 소린지 잘 모르겠어서, 일단 유효성 검사를 진행해보고 경과를 지켜보도록 하겠습니다.

 

 

 

알림 '1' 숫자가 사라진걸 볼 수 있습니다. 

 

 

문제가 씻은듯이 해결됐습니다.

즉, 결론은!

'유효성 검사 진행' 및 포스팅을 꾸준히 한 것만으로도 해당 문제는 해결된다는걸 확인할 수 있었습니다.

지금까지 '색인이 생성되었으나 robots.txt에 의해 차단됨' 문제 해결 방법에 대해서 알아봤습니다.