제가 받은 사이트 템플릿 파일인데, 여기 보면 검색엔진에 데모 사이트가 뜨는 것을 막기 위해서 meta 태그가 들어가있습니다.
이게 뭘까요?
사이트를 만드는 도중엔 검색엔진에 검색이 되지 않도록 하는 것입니다.
사이트가 만드는 중이라 엉망인데, 검색이 돼서 유저들이 들어오면 안되니까요.
사이트가 만들어진다음엔 저 라인을 빼서 검색이 되도록 해야겠지요.
name 속성값을 바꿔서 구글의 어떤 서비스에 내 사이트를 표시하지 말게 할지 지정할 수 있습니다.
name 속성으로 "robots"를 써주면, 구글의 모든 크롤러에게 표시하지 말라고 전하는 것입니다.
구글은 서비스 별로 여러개의 다른 크롤러를 쓰고 있습니다.
크롤러 리스트가 궁금하면 아래를 들어가보시고요
https://support.google.com/webmasters/answer/1061943
<meta name="googlebot" content="noindex" />
이렇게 "googlebot" 이라고 써주면 구글 검색 결과에 내 사이트를 띄우지 말라는 것입니다.
<meta name="googlebot-news" content="noindex" />
"googlebot-news" 라고 써주면 구글 뉴스에 띄우지 말라는 것이고요.
References
로봇 메타 태그, data-nosnippet 및 X-Robots-Tag 사양
https://developers.google.com/search/reference/robots_meta_tag
'개발 카테고리' 카테고리의 다른 글
Collapsing Margin 마진 겹침 현상 (0) | 2020.06.16 |
---|---|
CSS 의 px 단위 이해하기 (0) | 2020.06.16 |
Elastic IP 이것 모르면 돈 낼 수 있습니다 (0) | 2020.05.25 |
Ubuntu + Anaconda + Apache2 + Django 사용하기 (0) | 2020.05.25 |
robots.txt 란? - 검색엔진 크롤링 막기 (0) | 2020.05.18 |