세상 불만 많은 나의 일지

드디어 칼을 휘둘기 시작한 사이트 운영자 Part. 1

Kim모아 2021. 4. 29. 23:23
반응형

내 아는 형은 한강 수온을 네이버에 치면 상위권으로 나오는 한강라이프(Hangang.life) 개발자이다

 

그는 요즘 매우 큰 고민에 놓여있다.

크롤링.

무단 크롤링 때문에 고민이 많다고 한다

 

물론 그도 국가고시 사이트에서 수온 정보를 긁어와서

굳이 사용할 거라면 정당하게 회원 가입을 하고 API를 사용하라고 명시했지만

 

그마저 무시한다.

 

같은 서버 관리자인 나도 덩달아 화가 난다

(무단 크롤러가 1초에 10번씩 요청하는 상황이라 서버에 부담이 가기 시작함)

 

그래서 처음으로 캡챠를 도입했다

그랬더니 하루에 이상행동 감지로만 알림이 도배된다고 한다 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ

그만큼 크롤러가 많다는 거에 나도 경악을 했고 물론 형도 그랬다

 

Part. 2

드디어 사이트에 알고리즘을 추가하다

 

 

 

반응형
1 2 3 4 5 ··· 8