Q&A

시스템 설정 -> 보안설정의 "로봇 user-agent" 옵션

2024.07.21 07:24
122
1
CMS/프레임워크 Rhymix 2.1
개발 언어 PHP 8.2
문제 페이지 주소 비공개 (작성 후 5일 경과)

안녕하세요,

 

궁금한 부분이 있어 질문 올립니다.

사이트 이전을 마치고 사용량에서 트래픽을 보니 한도가 금방 차버립니다.

찾아보니 트래픽 일으키는 것 중에 유독 "Applebot" 이란 놈이 트래픽을 많이 일으키고 있습니다.

robots.txt 에 모든 봇 차단(User-agent: * Disallow: /)으로 설정해서 루트에 올려 놓았으나 작동이 안되는것 같습니다.

일단 보안관리 옵션에서 국가 전체(미국)를 차단해서 트래픽을 줄여 놓은 상태 입니다.

 

찾아보니 검색 봇 차단은 robots.txt 에서 막는 방법, .htaccess에서 막는방법, 서버에서 막는 방법이 있는것 같습니다. 

robots.txt가 잘 안되서 .htaccess에 설정 해볼까 하는데 Rhymix 버전업을 하면 새 파일로 덧 쓰여지니 고민 이군요.

시스템 설정 -> 보안설정에 로봇 user-agent 옵션이 있는데 이곳에 "Applebot" 이라고 적어 놓으면 .htaccess에 설정한 것과 같은 효과가 있을까요? 

 

감사합니다.

ksc

 

 

 

댓글 2

  • 2024.07.21 08:03 #1832558

    로봇을 차단하는 설정이 아니므로 의미 없습니다.

    그리고 이름에 bot이 포함되어 있는 것은 이미 라이믹스에서 로봇으로 인식합니다.

  • 2024.07.21 08:10 #1832566
    네, 그렇군요. 답변 감사합니다.
    ksc