인덱싱
-
Robots.txt vs Meta Robots Tag :: 마이구미웹 관련 2021. 11. 6. 15:40
이 글은 Robots.txt 와 Meta Robots Tag 를 비교한다. 넓은 범위에서 보면 같은 목적으로 생각할 수도 있다. 하지만 정확히 둘 사이의 차이를 알지 못한다면, 예상한 결과를 얻지 못할 수도 있다. Robots.txt - https://developers.google.com/search/docs/advanced/robots/intro?hl=ko Meta Robots Tag - https://developers.google.com/search/docs/advanced/crawling/block-indexing?hl=ko 우선 Robots.txt 를 다시 한번 간단하게 설명한다. (옛날옛적에 작성한 짧은 글) Robots.txt 파일은 검색 엔진 크롤러의 접근을 막기 위해 사용한다. 검색 사..