자동 알림보다 사람이 직접 요청하는 것이 훨씬 빨랐다

무엇을 관찰했나

새로 만든 상업적 성격의 페이지 하나가 있었다. 자동 색인 알림은 이미 보내 뒀는데도 며칠째 검색 결과에 나타나지 않고 있었다. 그런데 운영자가 검색 콘솔에서 그 페이지의 수집을 직접 요청하자, 같은 날 오전 안에 그 페이지 제목으로 검색했을 때 1위로 잡혔다.

두 경로가 왜 이렇게 차이 나나

자동 알림은 “이 주소가 바뀌었으니 확인해 보라”는 신호를 보내는 방식이고, 검색엔진이 언제 그 신호를 처리할지는 검색엔진의 사정에 달려 있다. 반면 직접 요청은 사람이 그 페이지를 지정해서 콘솔에 넣는 방식이라, 처리 우선순위가 다르게 매겨지는 것으로 보인다.

어떤 페이지들이 이 문제를 겪고 있었나

전체적으로 감사해 보니 뚜렷한 패턴이 있었다. 초창기에 발행한 글이나 지역 페이지는 이미 잘 잡혀 있는데, 최근에 정보 구조를 확장하면서 새로 만든 상업적 페이지들은 통째로 색인에 없었다. 콘텐츠 품질의 문제가 아니라 아직 검색엔진이 방문하지 않은 것이 원인이었다.

우선순위는 어떤 기준으로 정했나

색인 안 된 페이지가 여러 개일 때, 전부 한꺼번에 요청하기보다 어떤 것부터 요청할지 순서를 정했다. 총 방문자 수가 아니라 그 페이지가 실제 상업적 전환과 얼마나 가까운지를 기준으로 순위를 매겼다 — 예를 들어 제목에 이미 ‘업체’라는 말이 들어간 상업적 페이지를 요금 안내 페이지보다 먼저 요청하는 식이다.

‘색인 안 됨’을 어떻게 확실히 판단했나

전체 검색 결과 건수가 적다고 해서 곧바로 색인이 안 됐다고 판단하지 않았다. 페이지 제목을 그대로 검색했을 때도 결과가 0건으로 나오는 경우만 확실한 색인 누락으로 판단했다. 이 기준을 명확히 세워 두지 않으면, 실제로는 색인돼 있는데 다른 이유로 검색 결과 상위에 없는 경우와 혼동하기 쉽다. 이 감사 절차를 반복 가능한 명령으로 만들어서, 다음에 새 페이지를 만들 때마다 같은 방식으로 확인할 수 있게 했다.