공개 위키에 대한 AI 스크래퍼의 영향력이 증가하고 있다.
공격적인 AI 스크래퍼가 공개 위키의 비용과 안정성을 위협하고 있으며, 만약 완화 조치가 이루어지지 않으면 인간 사용자보다 10배 이상의 컴퓨팅 자원을 사용할 수 있다는 경고가 나오고 있다. 봇들은 GPTBot과 같은 식별 가능한 User Agent를 넘어서, 최신 Chrome과 같은 헤더를 모방하여 위기를 더욱 심각하게 만들고 있다. 하루에 100만 개의 IP를 사용하는 주거용 프록시를 통해 활동하는 이들에 대한 대응이 필요하다.
Aggressive AI scrapers are increasingly impacting public wikis.
Aggressive AI scrapers are threatening the cost and stability of public wikis, potentially using up to 10 times the computing resources compared to human activity if no mitigations are taken. These bots go beyond identifiable User Agents like GPTBot, even spoofing headers to resemble modern Chrome. There is an urgent need to address their activities, as they utilize residential proxies that can rotate through up to 1 million IPs daily.