본문 바로가기
카테고리 없음

"구글 서치콘솔에서 4xx 오류로 차단된 경우 해결 방법"

by 모있슈 2025. 3. 16.

구글 서치콘솔에서 4xx 오류로 차단된 경우 해결 방법

1. 문제 발생 원인

  • https://블로그주소.tistory.com/reaction 같은 URL이 Google Search Console(GSC)에서 4xx 오류
  • (주로 403, 404, 410 등)로 차단된 경우, 주요 원인은 다음과 같습니다.
    1. 해당 URL이 실제로 존재하지 않는 경우 → 404 오류
    2. 티스토리 내부 설정에서 특정 URL을 차단한 경우 → 403 오류
    3. robots.txt에서 해당 URL을 막은 경우 → 크롤링 불가
    4. 서버 문제로 인해 일시적으로 접근할 수 없는 경우
    5. 티스토리 스킨 또는 플러그인이 URL을 변경하거나 접근을 제한한 경우

2. 해결 방법

① Search Console에서 문제 확인하기

  • GSC에서 크롤링 오류 항목을 확인하고 정확한 오류 코드(404, 403 등)를 확인하세요.
  • URL 검사 기능을 이용해 현재 크롤링 가능 여부를 체크하세요.

② robots.txt 파일 확인

  • https://블로그주소.tistory.com/robots.txt에 접속하여 Disallow 설정을 확인하세요.
    • 예시)
      makefile
      복사편집
      User-agent: * Disallow: /reaction
    • 위처럼 /reaction이 차단되어 있다면, 문제 해결을 위해 robots.txt 수정이 필요할 수 있습니다.
      (하지만 티스토리는 기본적으로 robots.txt를 직접 수정할 수 없으므로, 티스토리 고객센터에 문의해야 합니다.)

③ 티스토리 설정 확인

  • 스킨 문제 해결:
    • 사용 중인 스킨에서 /reaction 관련한 코드가 있는지 확인하고 제거하세요.
    • 스킨을 기본값으로 변경한 후 문제가 해결되는지 확인하세요.
  • 플러그인 확인:
    • 일부 플러그인이 특정 URL을 차단할 수 있으므로 최근 설치한 플러그인을 비활성화해보세요.

④ 강제로 URL 삭제 후 재등록

  • 서치 콘솔에서 **'URL 삭제 도구'**를 이용해 /reaction URL을 삭제한 뒤, 다시 크롤링 요청을 보내보세요.
  • '색인 생성 요청'을 클릭하여 새로운 URL 크롤링을 요청하세요.

3. 결론

  • GSC에서 어떤 4xx 오류인지 먼저 확인하고,
  • robots.txt, 티스토리 스킨, 플러그인 문제를 점검한 후,
  • 필요하면 URL을 삭제 후 다시 등록하는 방식으로 문제를 해결하면 됩니다.

추가로 티스토리의 정책 변경이 있었는지도 확인해보는 것이 좋습니다! 🚀

 


"크롤링됨 - 현재 색인이 생성되지 않음" 오류 해결 방법

🔍 문제 발생 원인

구글 서치콘솔(GSC)에서 "크롤링됨 - 현재 색인이 생성되지 않음" 메시지가 표시되는 이유는 다과 같습니다.

  1. 구글이 크롤링했지만, 색인할 필요가 없다고 판단한 경우
    • 품질이 낮거나, 중복 콘텐츠라고 인식됨
    • 구글의 알고리즘이 페이지의 가치가 부족하다고 판단함
    • 최근에 생성된 페이지로 아직 평가 중일 가능성
  2. robots.txt 또는 noindex 태그 문제
    • robots.txt에서 해당 URL을 차단했거나,
    • <meta name="robots" content="noindex"> 태그가 포함된 경우
  3. 내부 링크 부족
    • 사이트 내 다른 페이지에서 해당 페이지로의 링크가 부족할 경우 구글이 페이지를 중요하지 않다고 판단할 수 있음
  4. 구글 검색 정책에 맞지 않는 콘텐츠
    • 자동 생성 콘텐츠(복붙, AI 생성 후 수정이 없는 경우)
    • 검색어 남용(과도한 키워드 삽입)

🛠 해결 방법

1️⃣ 색인 요청하기 (가장 기본적인 방법!)

  • 서치콘솔에서 해당 URL을 검사 → "색인 생성 요청" 버튼 클릭

2️⃣ robots.txt 및 메타태그 확인

3️⃣ 내부 링크 추가

  • 블로그 내 다른 인기 게시물에서 해당 페이지로 내부 링크를 걸어두기
  • 카테고리 페이지에 노출되도록 설정

4️⃣ 콘텐츠 품질 개선

  • AI 복붙 글이라면 문장 구조를 변경하고 직접 수정
  • 내용의 깊이를 추가하고 관련 이미지, 동영상 등을 삽입

5️⃣ 검색 의도를 만족하는 제목 및 설명 수정

  • 기존 글의 제목과 본문을 보다 자연스럽고 검색 의도를 만족하는 형태로 수정
  • 예를 들어, 티스토리 블로그 색인 문제 해결 방법처럼 구체적인 키워드 활용

🚀 결론

  1. 먼저 색인 요청을 해보고,
  2. robots.txt / noindex 문제 확인,
  3. 내부 링크를 추가하여 페이지 가치를 높이며,
  4. 콘텐츠 품질을 개선하면 해결될 가능성이 높습니다.

👉 위 과정을 적용하면 색인이 생성될 확률이 높아집니다! 🔥