구글 애드센스 Indexed, though blocked by robots.txt

 

안녕하세요. 반갑습니다.

 

구글 애드센스 광고 승인 후 구글에서 "Indexed, though blocked by robot.txt"에 문제에 대한 메일을 받았습니다. 무슨 문제가 있길래 조사하다가 저와 비슷한 경우가 있으신 분을 위해 포스팅합니다.

 

 

아래와 같은 에러 메시지를 받으셨나요? 해당 사이트에 발견된 커버리지 이슈가 발생했다는 내용인데요.

요점은 구글 서치 콘솔이 당신의 사이트를 색인하였으나 몇가지 페이지에 접근을 못했으니 확인해보라는 내용입니다.

 

 

일단 번역기를 돌려보니 아래의 내용으로 확인 됐습니다.

---

https://likesnowball.tistory.com/에서 감지된 커버리지 문제

https://likesnowball.tistory.com/의 소유자에게 : Search Console에서 사이트가 다음 1 가지 범위 문제의 영향을 받는 것으로 확인되었습니다.

 

주요 경고 경고는 개선을 위한 제안입니다. 일부 경고는 검색 결과에 영향을 줄 수 있습니다.

일부는 향후 오류로 재 분류될 수 있습니다. 사이트에서 다음 경고가 발견되었습니다.

색인이 생성되었지만 robots.txt에 의해 차단됨 Google 검색에서 최상의 경험과 범위를 사용할 수 있도록 가능하면 이러한 문제를 해결하는 것이 좋습니다.

---

메일의 'FIX Converage Issues3" 클릭하여 세부적으로 문제사항을 확인했습니다.

 

2개의 page에서 에러 발생한 것을 알 수 있습니다.

 

각 에러 발생된 페이지를 보면 첫 번째 URL 'enty/post'는 글 작성하는 페이지입니다.

그리고 '/manage'는 구글 로봇이 확인할 필요 없는 관리자 페이지입니다. 

 

"Indexed, though blocked by robot.txt"라는 뜻은 색인이 되었지만 로봇이 들어갈 수 없다는 내용인데 이러한 2가지 페이지는 굳이 들어갈 필요가 없습니다.

 

티스토리 고객센터에 문의하고 받은 답변 내용입니다.

 

 

님의 티스토리의 어느 페이지가 구글에서 발견되어 색인화되었는데 robot.txt에 의해 접근이 막혔다는 의미입니다. 
각 블로그에 따라 경우의 수가 많이 때문에 누구도 정확한 답변을 드릴 수 없습니다.
구글 서치 콘솔에 가보면 오류가 난 곳에 대한 url이 있을겁니다. 잘 살펴보고 답을 찾아보십시오.
하지만 robot.txt에 의해 막힌 곳은 주로 관리자모드 페이지들인 경우가 많아 사실 무시하고 넘어가도 되는 오류가 많습니다.

 

여기까지 구글 애드센스 에러 "Indexed, though blocked by robot.txt"에 대한 내용을 확인하셨습니다.

별 문제 아니니 진행하셔도 큰 문제가 없을 것입니다. 실제로 다른 티스토리 블로그에도 별 탈 없이 운영하고 있습니다.