자유게시판

제목 로봇은 우리편?악당?
글쓴이 벨리 작성시각 2009/12/09 12:10:55
댓글 : 2 추천 : 0 스크랩 : 0 조회수 : 14648   RSS

날이 점점 추워지네요...
사무실 기온이 너무 따듯해 밖에 나가지도 않네요^^
세상돌아가는 것도 모르고 사이트 오픈 작업에 매진중입니다....
요즘은 감기만 걸려도 무서운(?) 세상이 된듯하여 씁쓸합니다.


다름이 아니라 로그 파일 점검중에 NaverBot / Googlebot 이 친절히 방문해주신 내역이 있어..
혹시나 하여 관련 정보를 검색해보다...

"로봇이 우리 사이트에 와서 이거저거 가져가다, 보안상 구멍(?)을 발견시 해킹/정보유출 같은 상황이 올수도 있다?"

확인 되지 않는 User-agent 의 로봇 접속은 막아야 하나....
네이버나 구글같은 봇도 위험도가 있는지에 대한 의문입니다.

포험 회원님들은
사이트 홍보에 도움을 받는 것과 위에말씀드린 위험도 사이에서 어떤길을 택하고 계신가요?

구체적으로 어떻게 로봇을 차단하고 계신지도 살~~알짝 궁급합니다...

아직 검색로봇에 대해서 대처해본적이 없어서 조언 부탁드립니다...







 다음글 심심해서 글 하나 올려요 ㅎㅎ (2)
 이전글 나이먹은 사람들을 위한 명언 (5)

댓글

변종원(웅파) / 2009/12/09 12:22:16 / 추천 0
회원수나 컨텐츠보안을 신경써야할 정도의 규모라면 로봇을 막는 것이 좋습니다.
웹서버 루트에 robots.txt을 이용하거나 apache config에서 선언하기도 합니다.
포럼의 경우는 알리는 것이 우선 목적이기때문에 로봇을 막지않고 전부 풀어놨습니다.
포럼 robots.txt의 내용

User-agent: *
Allow: /
정책적으로 판단하셔야 할 것 같습니다. 홍보와 위험도
그리고 robots.txt에 대해 검색해보시면 선택한 로봇만 접근을 허락할 수도 있습니다.

여기 참고해보세요. ^^
http://blog.naver.com/rhcps00?Redirect=Log&logNo=140035945788
벨리 / 2009/12/10 19:32:35 / 추천 0
웅파님 많은 도움이 되었습니다.
감사합니다.

포럼도 오픈상태군요~~^^