차이

문서의 선택한 두 판 사이의 차이를 보여줍니다.

차이 보기로 링크

양쪽 이전 판 이전 판
네이버_웹_크롤러 [2010/09/27 16:21]
raychani
네이버_웹_크롤러 [2010/09/27 16:29] (현재)
raychani
줄 8: 줄 8:
  
 어차피 즐겨찾기 해 두고 접속해 오는 것을 기대하는 것은 아니므로 검색 엔진에 등록되는 것은 환영한다. 그러나 최소한 [[wk>​로봇 배제 표준]]은 지켜야 하는 것 아닌가? robots.txt파일에 Sitemap을 등록해 놓은 것이 아깝다.(사실 구글을 위한 것이다.) 어차피 즐겨찾기 해 두고 접속해 오는 것을 기대하는 것은 아니므로 검색 엔진에 등록되는 것은 환영한다. 그러나 최소한 [[wk>​로봇 배제 표준]]은 지켜야 하는 것 아닌가? robots.txt파일에 Sitemap을 등록해 놓은 것이 아깝다.(사실 구글을 위한 것이다.)
 +
 +===== 관련 자료 첨부 =====
  
 다음은 이 홈페이지의 robots.txt 파일이다. 아래 4줄은 이번에 추가한 것이다. 그러나 네이버 웹 크롤러가 이를 지킬 지는 의문이다. 다음은 이 홈페이지의 robots.txt 파일이다. 아래 4줄은 이번에 추가한 것이다. 그러나 네이버 웹 크롤러가 이를 지킬 지는 의문이다.