구글서치콘솔 색인 생성 요청 거부 해결 방법(robots)

구글서치콘솔 색인 생성 요청 거부 해결 방법을 알려드리겠습니다. 요즘 들어 구글서치콘솔에서 색인 요청하면 색인 생성 요청 거부 창이 뜨며 색인이 잘 안 되는 현상이 갑자기 일어나고 있습니다. 이런 현상은 여러분들 잘못이 아니라 티스토리 자체 서버 문제인듯합니다. 그럼 색인 생성 요청 거부 해결방법을 알려드리겠습니다.

---

구글서치콘솔 색인 생성 요청 거부 - 크롤러란?

크롤러란 프로그램, 웹 개발에서 크롤러는 스파이더, 봇 또는 웹 스크레이퍼라고도 하는데 인터넷의 웹사이트에서 데이터를 자동으로 스캔하고 추출하는 프로그램입니다.

 

그래서 정보를 수집하는 크롤러가 구글서치콘솔에서 색인을 잡으려면 내 사이트의 정보가 구글 색인에 잡힐수 있게 설정으로 해결해야 합니다. 

이러한 방법법을 아래에서 설명해드리겠습니다.

---

색인 생성 요청 거부 해결 방법

우선 위 설명처럼 크롤러가 본인의 사이트를 스캔하고 수집하기 위해서는 "Robots.txt"파일을 설정해야 합니다. 이 설정만 한다면 앞으로 계속해서 본인 블로그의 정보가 계속해서 수집됩니다.

색인 생성 요청 거부 해결방법

1. Robts.txt 설치

아래 설치파일을 다운로드를 하거나, 구글 또는 네이버 웹마스터 도구에서 다운로드하셔도 되겠습니다. 네이버에서 다운로드할 경우 꼭 "모든 수집 허용"을 선택 후 다운로드 하시기 바랍니다.

robots.txt

0.00MB

2. Robts.txt 티스토리 or 사이트 주소 설정

Robts.txt파일에 아래와 같이 본인 사이트를 입력해 줍니다. 그리고 sitemap.xml 까지 써야 합니다. 

User-agent: *
Allow:/
Sitemap: 예시) https://simgolddoro.tistory.com/sitemap.xml

 

3. Robts.txt 파일 티스토리에 업로드하기

• 티스토리 관리자에 들어가서 아래 사진처럼 스킨편집에 들어갑니다.
• 스킨 편집창에서 html 편집에 들어갑니다.

• hmtl 편집에 들어가서 "파일업로드"를 클릭하고 아래에 +추가하기를 눌러서 다운로드했던 robts.txt파일을 업로드 후 적용하기를 누릅니다.

 

그럼 모든 설정이 완료되었고 여러분들의 블로그 사이트는 앞으로 모든 검색엔진에서 사이트를 수집하실 겁니다.

 

이 외에 Robts.txt로 여러 가지 활용방법들이 구글 검색센터에 자세히 나와있습니다. 특정 이미지 삭제, 수집 멈추기 등등 활용방안이 자세히 나와있으니 이런 것들도 참고하여 알아두시면 블로그 하시면서 많은 도움이 되실 겁니다.

 

구글 검색센터 바로가기

---

 

함께 보면 좋은 글

취준생, 주부, 무직자 대출 가능한 곳 TOP 5

본디(Bondee) 설치 방법 및 관련주

ChatGPT 인공지능으로 생일, 고백, 감사, 응원 편지 쓰기 방법