Robots.txt / 블로그 최적화 3편

목차. A.

Robots.txt 가 존재하지 않습니다?? B.

오류를 수정해보자 C. robots.txt 다운로드 후 등록하기 D. 플러그인을 사용하여 메타태그 등록하기 E.

검증 A. Robots.txt가 존재하지 않습니다??

네이버 웹페이지 최적화 툴에 들어가면 위와 같은 창이 뜬다. 저 URL 입력에서 확인을 눌러보면, 아래와 같이 내 블로그에 상태에 대해 검사를 실시하게 되는데.

아래 "!" 표시를 보면 robots.txt가 존재하지 않는다고 된다.

저 위의 오류를 지금부터 수정해보겠다. 유저들이 필요한 콘텐츠를 검색하는데, Robot이 내 콘텐츠를 열심히 크롤링해줘야 노출도 잘 되지 않을까..

하는 단순한 로직 ㅎㅎ B. 오류를 수정해보자.

검증 툴로 들어가 robots.txt 을 눌러보면 위와.....

원문링크 : Robots.txt / 블로그 최적화 3편