원문 캡처 · disassociated.com
원문 캡처 · disassociated.com

몇 주 전, 미국의 한 의료 단체가 내 사이트 첫 화면에 링크한 듯한 방문 기록이 보였다. 방문은 계속 늘었고 여러 페이지로 퍼졌지만, 실제로는 AI 스크레이퍼가 콘텐츠를 훑고 있었다.

블로그를 운영하며 관찰한 이 현상은 AI 스크레이퍼가 추천인 스팸(referrer spam)을 이용해 웹사이트의 방문 기록에 가짜 유입 경로를 남기는 문제다. 추천인 스팸은 다른 사이트가 방문자를 보낸 것처럼 웹사이트 운영자를 속이는 수법이다. 예전에는 이런 기록을 공개하는 사이트를 찾아가게 하거나, 스팸 사이트의 검색 순위를 높이는 데 쓰이기도 했다.

이번에는 의료 전문가를 위한 미국 단체의 이름이 방문 경로에 나타났다. 하지만 그 단체가 실제로 링크를 건 것은 아니었다. 곧 의료·건강과 무관한 여러 페이지에도 방문이 이어졌고, 페이지를 훑는 활동의 패턴에서 AI 스크레이퍼임을 알아챘다.

추천인 스팸을 막거나 스크래핑 활동이 방문 기록에 나타나지 않도록 하는 방법을 찾아봤지만, 효과적인 해결책은 없었다고 전한다. 다만 글은 어떤 차단 방법을 검토했는지, 방문 기록을 남기는 구체적인 방식이 무엇인지는 밝히지 않는다.

추천인 스팸 설명