robots.txt 파일 이렇게 하는게 맞나요?

댓글 3

• 좋은아빠되기

  2018.02.03 02:57

  이상 없는것 같은데요. ㅎㅎㅎ
  
  허용하지 않음이라는 단어를 이용하셨네요.
  
  
  허용함을 이용해서 설정해 보는건 어떨까요?
  
  User-agent : *
  Allow : /
  
  이렇게 한번 바꿔 보시는것도 추천 드립니다. 제가 저렇게 설정해서 사용중입니다.
  
  
  User-agent : *
  Disallow:/ <--모든 접근 거부
  
  User-agent : *
  Disallow: <-모든 접근 허용
  
  위 두개는 완전히 다르므로 주의 하시구요.

   

  / <--- 이놈 슬러시 한개 차이가 엄청나죠 ㅎㅎㅎ

   

  추가로 robots.txt 파일을 아예 없애버리면 기본적으로 검색을 허용하는걸로 인식합니다.

   

  이것도 한 방법이 될수 있겠네요.

  좋아요 0
• 가이더

  2018.02.03 03:22
  흐미
  좋아요 0
• 

  기진곰

  2018.02.03 04:00

  User-agent 앞에 빨간 점이 수상하네요. 혹시 메모장에서 수정해서 UTF-8 BOM이 들어간 건 아니겠지요?

  좋아요 0