DNS 서버 응답 없음 및 Robots.txt를 찾을 수 없음 메세지가 계속적으로 나온다면, 이 글을 통해서 확인하세요. 티스토리나 워드프레스를 사용하고 있고 수동으로 구글 서치 콘솔에 글을 빠르게 올리고 있는데 에러가 나온다면 이렇게 대처하시면 돼요.
1. 구글서치콘솔 수동 색인생성 요청이란?
워드프레스를 적극적으로 시작하신 분들이라면 티스토리와는 다른 시스템에 난감할 때가 많은데요. (사실 티스토리도 완벽하진 않죠.) 자동으로 구글 서치콘솔에 올리는 플러그인을 쓰더라도 인덱싱 누락이 상당히 많더라고요. 그래서 수동으로 URL 검사를 통해서 색인 생성 요청을 하시는 분들이 많을 거에요.
2. URL을 Google에 등록할 수 없음?
색인 생성 요청 시 많은 error가 나오는데요. URL을 등록할 수 없다고 에러가 나오면서 페이지 가져오기에 워드프레스를 적극적으로 시작하신 분들이라면 티스토리와는 다른 시스템에 난감할 때가 많은데요. (사실 티스토리도 완벽하진 않죠.) 에러 메세지는 이 세 가지가 보통 보이실 거에요.
1. 실패: DNS 서버 응답 없음
2. 실패: Robots.txt를 찾을 수 없음
3. 해당사항 없음
뭔가 사이트 등록 할 때, 혹은 내가 쓴 글에 잘못되어 있나? 확인을 해 보고 다시 수동 색인 요청을 해도 계속적으로 에러가 뜨는 경우가 99%일 때 해야 하는 일에 대해서 알려드릴게요.
3. 시간을 갖고 기다린 후에 수동 색인 요청을 하세요.
우리들이 틀린 건 없더라고요. 구글에 아무리 검색해봐도 이유를 정확하게 설명해 주는 글은 없었어요. 이렇게 수동 색인 생성 요청 시 에러가 나오는 경우는 구글의 서치콘솔 시스템이 과부하가 걸려서 검색 시스템 안에 내 글을 넣을 수 없는 게 아닐까 저는 그렇게 판단하기로 했어요.
안된다고 계속 수동 색인 요청을 해서 운 좋게 색인생성 요청 완료 팝업이 뜨더라도 제대로 색인이 안되고 있음을 확인했어요. 실제로 나중에 해당 글의 링크를 붙여 넣어 보시면 색인이 안 되어 있을 거에요. 위의 세 가지 사유로 인한 색인 생성이 안될 경우에는 수동 색인 생성을 멈추고 다음날 아침에 하시면 바로 생성이 될 거에요.
페이지 가져오기 실패 이유와 대처법 정리
- 우리가 잘못한 게 아니라, 구글측의 문제입니다.
- 우리가 당장 할 수 있는 건 없어요.
- 계속 반복해서 억지로 제출되었더라도 서치 콘솔에 등록이 안될 가능성이 높아요.
제가 위에서 알려드린 방법처럼 기다림이 약이라는 것을 알게 되셨으면 좋겠어요. 구글AI가 검색엔진에 등록하는 것을 저처럼 기다리지 못하는 분 이라면 혹은 글이 검색엔진에 빠르게 등록되기를 원하시는 분들이라면 이러한 에러가 이해가 안 되셨을텐데 제 글이 도움이 되셨으면 좋겠네요. 기다림이 ‘약’입니다.