먼저 해당 URL이 검색에 필요한 페이지인지 확인합니다. 중요 페이지라면 서버 응답, 접근 제한, 내부 링크, 사이트맵과 사이트의 중복 URL 규모를 함께 조사합니다.
크롤링됨 - 현재 색인 생성 안 됨과는 처리 단계가 다릅니다. 어느 상태가 항상 더 심각하다고 정하지 말고, 중요한 페이지의 영향 범위와 지속 기간을 기준으로 판단합니다.
noindex는 읽기 위해 크롤링이 필요한 색인 제외 지시이므로 크롤링 예산 절약용으로 일괄 추가하지 않습니다. 색인 제외와 크롤링 제어의 목적을 나누고, 필요한 수정 후 중요 URL의 재처리를 요청할 수 있습니다.