구글에서 robots.txt 문구 노출건 문의

댓글 7

• 불금

  2016.04.24 10:11
  크롤링을 허용할거면 robots.txt 는 아예 없어도 됩니다. 그냥 지우세요.
  좋아요 0
• 우리종도

  2016.04.24 11:39
  @불금

  불금님 안녕하세요. 답변 주셔서 감사합니다. 그냥 지워도 무방할까요?
  네이버 사이트 등록을 위해서는 robots.txt가 필수인 것 같아서요.
  좋아요 0
• 루딩

  2016.04.24 13:16
  @우리종도

  등록 하시고 지우심이 'ㅁ'
  좋아요 0
• 불금

  2016.04.24 14:08
  @우리종도

  네 그냥 지워도 됩니다. 필요 없어요.
  정 꺼림칙하시면 그냥 빈파일로 두셔도 되요.
  좋아요 0
• 우리종도

  2016.04.25 16:11
  @불금

  넵, 루딩님, 불금님 답변 감사합니다.
  좋아요 0
• 루딩

  2016.04.24 13:17

  전
  
  User-agent: *
  Disallow: /admin$
  Disallow: /admin/
  Disallow: /*?module=admin$
  Disallow: /*?module=admin&
  Disallow: /*act=IS&
  Disallow: /*act=IS$
  Disallow: /*search_keyword=*&search_target=
  Allow: /*search_keyword=*&search_target=*&document_srl=
  Disallow: /*search_target=*&search_keyword=
  Allow: /*search_target=*&search_keyword=*&document_srl=
  Sitemap: https://www.domain/sitemap.xml
  
  
  요렇게 해놨습니다.
  .
  xetown.com robots.txt 따라했어요~~
  
  구글에 정상적으로 사이트 설명 노출됩니다~

  좋아요 0
• 우리종도

  2016.04.25 16:11
  @루딩

  루딩님, 상세 설명 감사합니다.
  좋아요 0