TL;DR

  • Ghost로 블로그를 재출시하면서 호스팅 장애 이후 기존 글을 복원한 결과 Google에 만료 도메인 악용처럼 보였고, 약 9개월 뒤 색인이 다시 시작됨.
  • Google Search Console에서 페이지 대부분이 ‘크롤링됨 — 현재 색인되지 않음’ 상태였으며, Hacker News에 게시된 글도 잠시 색인된 뒤 일주일 만에 제외됨.
  • Google 지원 포럼에서는 제재가 없어 보인다고 답했지만, 사이트 품질 재평가가 끝날 때까지 기다리라는 안내만 제공됨.
  • 검색 유입에서 DuckDuckGo 59.1%, Google 15.3%, Kagi 9.2%를 기록했으며, 프라이버시 중심 검색 엔진이 전체 검색 트래픽의 약 75%를 차지함.
  • Google 색인 여부와 무관하게 양질의 콘텐츠를 꾸준히 작성하는 일이 모든 검색 엔진에서 발견될 가능성을 높이는 가장 좋은 방법으로 제시됨.

Google 색인에서 제외된 배경

  • 지난해 6월 한동안 쉬었던 뒤 Ghost를 사용해 블로그를 다시 제작하고, 블로그 15주년을 기념해 예전 글도 복원함.
  • 기존 사이트의 호스팅이 한동안 고장 난 상태에서 사이트 재출시와 블로그 엔진 변경을 동시에 진행함.
  • 이 과정이 Google에 만료 도메인 악용(expired domain abuse)처럼 보이게 만든 것이 큰 실수였다고 판단함.
  • 지난해 5월부터 Google Search Console에서 모든 페이지가 ‘크롤링됨 — 현재 색인되지 않음(Crawled - currently not indexed)’으로 표시됨.
  • Hacker News 첫 화면에 올라간 글 몇 개는 잠시 색인되어 해당 기간에 클릭이 발생했지만, 일주일 뒤 페이지가 다시 색인에서 제외됨.

Google 지원 포럼의 답변

  • 색인되지 않을 만한 일반적인 이유를 세 번 확인한 뒤 Google 지원에 도움을 요청함.
  • Google이 알 수 없는 이유로 사이트를 외면하면 직접 연락할 방법이 없었으며, 지원 포럼에 질문을 게시함.
  • 포럼에서는 사이트에 제재가 적용된 것으로 보이지 않는다는 답변을 받음.
  • 지원 포럼의 안내는 다음과 같음.

“Google이 사이트 품질을 재평가하면 색인이 자연스럽게 재개될 것임.”

  • 제시된 해결책은 기다리면서 먼 곳을 바라보는 것에 가까웠으며, 해당 문의 글은 잠김 처리됨.
  • 결국 추가로 9개월을 기다려야 했던 것으로 보임.

다시 유입되기 시작한 트래픽

  • 클릭과 페이지 조회 수가 서서히 유입되기 시작함.
  • Google 색인은 반가운 변화이지만, 이전에 생각했던 것만큼 중요한 요소는 아니게 됨.

트래픽 수치

  • 처음에는 Umami 분석 도구를 직접 호스팅함.
  • 이후 Ghost 6.0 출시와 함께 내장 분석 기능을 사용할 수 있게 되어 11월부터 이어진 웹 트래픽 데이터를 확보함.
  • 특이한 인공지능 생성 메일링 리스트에 유입된 경우처럼 급증한 수치를 제외하면, 대부분의 트래픽은 직접 유입(direct)으로 표시됨.
  • 직접 유입의 상당수는 추적기를 차단하는 사람들일 가능성이 있으며, 이런 독자가 사이트를 읽어주기를 가장 바람직하게 생각함.
  • 두 번째로 큰 트래픽 출처는 다른 사람들이 글을 제출했을 때 발생하는 Hacker News 유입임.
  • 비집계형 전통 소셜 미디어 유입은 전체 트래픽의 8%에 불과함.
  • 소셜 미디어를 사용하지 않으므로 소셜 미디어는 직접 확장하는 유입원이 아님.
  • 상위 유입원을 제외하면 전체 트래픽의 절반이 검색에서 발생하며, 급증한 수치보다는 작지만 안정적인 방문자 유입원으로 기능함.

검색 엔진별 비중

  • DuckDuckGo: 59.1%
  • Google: 15.3%
  • Kagi: 9.2%
  • Bing: 5.6%
  • Brave Search: 5.0%
  • Ecosia: 2.5%
  • Yandex: 1.7%
  • Qwant: 1.7%
  • Google에서 발생한 조회 수는 전체 검색 유입의 15%에 불과함.
  • 대신 프라이버시 중심 검색 엔진이 전체 검색 트래픽의 약 75%를 차지함.
  • Google이 사이트를 색인하지 않은 뒤 Kagi의 smallweb, personalsit.es, bubbles.town, blogroll.org 같은 사이트에 등록함.
  • 그 결과 여러 검색 엔진에서 폭넓게 노출될 수 있게 되었으며, Google의 영향력에 종속되지 않는 점이 긍정적으로 평가됨.

계속 글을 작성함

  • Google이 다시 사이트를 색인하기로 한 이유는 알 수 없음.
  • 양질의 콘텐츠를 작성하는 연습과 실제로 정기적으로 글을 쓰는 일이 어떤 검색 엔진에서도 색인될 가능성을 높이는 가장 좋은 방법일 가능성이 큼.
  • 프로젝트, 행사, 여러 생각을 다루지만 모든 글에는 배운 내용을 다른 사람들과 공유한다는 공통점이 있음.