끄적거림의 자유로움

이번에 텍스트큐브로 갈아타면서
robots.txt 를 설정했다.


홈페이지 최상위 폴더에 rotots.txt 파일을 생성해서 위와 같이 설정하면
검색로봇이 tc 폴더내의 데이터를 읽지 못하게 한다.
아니.. 읽지 말라고 협조를 구하는거지..

참고로
이렇게 설정하면 구글봇은 허용하고 그 이외의 것은 전혀 허용안한다는 의미이다.
그냥 보면 어떻게 설정하는지 알겠지.

팁 같은건 이올린쪽에 올라가도록 발행을 하고는 있는데.
검색엔진들이 와서 내 페이지를 긁어가는게 어느 순간부터 싫더라고..

그래서 저걸 설정한 이후로는 검색엔진이 왔다가 그냥 가고 있는듯 보인다..
폴더는 기존에 tt1 을 썼는데 이번에 tc로 바꿔서 예전 링크는 다 깨졌을테고..

그런데 엠파스 이 녀석만은 나의 협조를 무참히 밟어버린다.

무슨 열린 검색이라나.. ㅡㅡ;;;
아마.. 얘전에 네이버 DB를 검색하면서 그러고 있나 보다.
포털끼리 싸우는건 그들끼리 알아서 할일이지만..

내가 거부했으면 오지 말아야 하는거 아닌가..

덴당.. IP로 막아볼까...
이 녀석 IP는 어찌 될까..

문듯 생각해보니........
이거 이올린에 올라오는거 긁어가는거 아냐.. ㅡㅡa
혹시나 하고 발행안 된 녀석들 제목으로 검색하니 나온다...
직접 오는거군...

크리에이티브 커먼즈 라이센스

이 저작물은 크리에이티브 커먼즈 코리아 저작자표시-비영리-변경금지 2.0 대한민국 라이센스에 따라 이용하실 수 있습니다.