블로그(티스토리) 등 실제 적용되는 robots.txt 확인하기
특히 티스토리 사용하는 사용하는 블로거들 중에 robots.txt 때문에 곤란을 겪는 사람들이 많다. 애드센스에서 robots.txt에서 검색로봇을 차단했다거나 색인이 되지 않았다는 등의 경고를 받았을 때 뭘 어떻게 해야할지 혼란이 많다. 인터넷 검색해 보면 네이버의 웹마스터도구관리에서 블로그의 robots.txt를 설정하라는 포스팅도 심심찮게 볼 수 있다. 그런데 대부분 사실과 다른 부분들이 있다. 이 페이지의 기능은 말 그대로 robots.txt가 제대로 적용되고 있는지 내용을 검증하는 것이다. 티스토리의 robots.txt 내용을 변경 할 수 없다. 또 혹자는 티스토리의 스킨 편집 창에서 이미지 파일 첨부에 robots.txt 파일을 업로드하라고 하는데 그것도 사실과 다르다. robots.txt는 ..
기타등등/애드센스
2022. 10. 5.