본문 바로가기
검색엔진 로봇의 인덱스 방지기능 다음 회색 박스안의 글의 출처는 http://www.bmlee.com/ 입니다. 직접 들어가보시면 유용한 정보가 많이 있습니다. 그대로 가져왔습니다. ^^; 검색엔진 최적화의 기본 : 검색엔진의 인덱스 방지기능 (robots.txt파일과 메타 태그) 검색엔진 최적화에 반드시 필요한것은 아니지만, 기본적으로 알아두시는게 좋습니다. robots.txt은 로봇 제외 표준이라 불리며, 검색엔진 봇들로 하여금 사이트의 전체, 또는 특정부분의 접근을 제한하게 만드는 역할을 합니다. robots.txt파일은 검색엔진 봇들로 하여금 어떤 디렉토리는 인덱스가 가능하며, 어떤 디렉토리는 인덱스를 해서는 안된다는 것을 알려줍니다. 검색엔진 봇들 또한 특정 사이트를 방문했을때, 이 robots.txt파일을 제일 먼저 찾게되며.. 더보기

티스토리툴바