티스토리(TISTORY) 네이버 웹마스터도구 robot.txt 티스토리 블로그를 생성한 후 웹마스터도구 설정을 하고, 마지막 단계인 rotot.txt 설정입니다.네이버든 구글이든 검색엔진 로봇이 있는데네이버에서는 "yeti" 가 활동을 하고 있죠.검색엔진 로봇이 rotot.txt 파일에 적혀있는 코드를 통해 페이지의 정보들을 수집(크롤링) 해 가기 때문에robot.txt 설정이 필요한 부분인데요.내가 노출하고 싶은 페이지와 노출하고 싶지 않은 페이지들을robot.txt 파일을 통해 검색엔진 로봇의 행동을 통해 조절할 수 있습니다.그럼 웹마스터 도구에 로그인을 해주시고, [검증]메뉴로 들어가보도록 할게요! 들어가보시면, 아래에 파일을 생성 할 수 있는 기능이 있어요.직접 코드를 짜도 관계 없습니다 :..
