구글 서치 콘솔을 통해서 웹사이트 또는 블로그를 관리하다가 보면
아래와 같은 메세지를 구글 서치콘솔에서 발견할때가 있습니다.
이번엔 이런경우 어떻게 하면 되는지 알아보겠습니다.
구글 서치콘솔 사이트등록시 사용한 이메일로 날라온 메일입니다.
STEP 1.
"확인 절차 진행 상황 보기" 버튼을 눌러 확인해봅니다.
STEP 2. 구글 서치 콘솔(Google SearchConsole) 페이지가 뜨게 됩니다.
내용을 보니
" 색인이 생성되었으나 robots.txt에 의해 차단됨 " 으로 뜨네요.
세부정보 보기를 클릭합니다.
STEP 03. 실패함에 담긴 URL 을 살펴봅니다.
위의 3개의 URL 에 대해서
구글봇이 접근하다가 제 블로그 robots.txt 설정에 의해 접근이 차단된것으로 보이네요.
그럼 티스토리의 robots.txt 공통설정을 살펴볼까요?
저는 티스토리를 사용중이므로
네이버 웹마스터도구 > 검증 > robots.txt 메뉴에서 robots.txt 설정을 살펴봅니다.
오류로 나온 위의 3개의 URL 모두 robots.txt 설정에의해서 차단된것이 맞네요..
티스토리에서 블로그를 운영중이신분들은 robots.txt 를 수정불가능합니다.
티스토리 공통 설정을 그대로 따라야합니다.
User-agent: * //모든 검색엔진에 대하여
Disallow: /manage //manage 이하 URL 로의 접근은 허용하지 않는다(티스토리 관리자페이지)
구글 검색엔진에서 내 블로그의 관리자페이지를 색인등록할 필요는 없겠죠?
그냥 두셔도 크게 문제가 없습니다.
첨언하면, 내가 포스팅한 글 URL 에 대해서만 로봇이 잘 가져가는지 확인하시면 됩니다.
도움이 되셨다면 아래 공감 ♥ 꾹 부탁드려요.
'IT.컴퓨터 ' 카테고리의 다른 글
구글 서치 콘솔 '제출된 URL을 찾을 수 없습니다' 404 오류시 대처방법 (10) | 2019.01.17 |
---|---|
피싱, 파밍, 스미싱 어떻게 다른걸까요? (7) | 2019.01.16 |
2019 정보처리기사 시험일정 및 합격률 (0) | 2019.01.11 |
2019 정보보안기사 시험일정 및 시험과목 (8) | 2019.01.08 |
정보보안기사 합격률 및 2019년 시험일정 (0) | 2019.01.06 |