- Published on
2026년 7월 10일 LWN의 Jonathan Corbet가 스크래퍼 상황 업데이트를 냈습니다. 핵심은 두 가지입니다 — residential proxy(가정용 프록시)가 IP 기반 차단을 사실상 무력화했고, AI 크롤러의 폭증이 그 수요를 채웠습니다. 한 번의 공격에서 몇 시간 동안 수백만 개의 서로 다른 IP가 각자 두세 번씩만 사이트를 두드립니다. 이 글은 왜 차단이 구조적으로 실패하는지, 오픈소스 git 포지가 왜 가장 먼저 맞았는지(그리고 Anubis가 왜 거기서 태어났는지), 그리고 작업증명·CAPTCHA·데이터 오염 같은 방어가 개방형 웹에 물리는 세금을 정직하게 정리합니다.