'페이지 색인 생성 > robots.txt에 의해 차단' 해결
경제문화 Economy, Culture/애드센스 Adsense2022. 10. 4. 09:43
더보기
Construction, Science, IT, Energy and all other issues
Search for useful information through the top search bar on blog!
건설,과학,IT, 에너지 외 국내외 실시간 종합 관심 이슈 발행
[10만이 넘는 풍부한 데이터베이스]
블로그 맨 위 상단 검색창 통해 유용한 정보를 검색해 보세요!
가끔 Google Search Console에
페이지 색인 생성 > robots.txt에 의해 차단됨이라는 메시지가 온 것을 볼 수 있습니다.
https://conpaper.tistory.com/manage
하지만 해당 페이지는 로봇이 접근할 수 없는 관리용 페이지이기 때문에 크롤링 대상이 아닙니다.
robots.txt은 네이버서치어드바이저의 검색 로봇으로 구글에서 경고라고 보냈지만 그냥 무시해도 됩니다.
네이버서치어드바이저에 가면 검색이 잘되고 있음을 확인할 수 있습니다.
댓글()