본문으로 건너뛰기
창립 멤버:Linkorite Growth 12개월을 149달러에 이용하세요. 11월 29일에 가격이 인상됩니다.지금 자리 확보하기 →
Linkorite 작성: GTM S t a c k
테크니컬 SEO

Robots.txt

검색 엔진 크롤러에게 사이트의 어떤 페이지나 섹션을 크롤링하거나 무시할지 지시하는 텍스트 파일

robots.txt는 웹사이트 루트 디렉터리에 위치하며, 검색 엔진 크롤러가 어떤 페이지나 디렉터리에 접근해도 되는지 또는 안 되는지를 알려 주는 파일입니다. 링크 빌딩에서는 잠재 링크 파트너를 평가할 때 robots.txt를 이해하는 것이 중요합니다. 내 링크가 게재된 페이지가 robots.txt로 차단되어 있으면 검색 엔진이 크롤링할 수 없어 백링크가 SEO 가치를 전혀 주지 못합니다. 링크 기회를 감사할 때 대상 사이트의 robots.txt를 확인하면 크롤러가 내 링크를 발견할 수 있는지 보장할 수 있습니다. 또한 내 사이트의 robots.txt가 백링크를 받는 중요한 페이지를 실수로 차단하지 않도록 해야 합니다.

매주 링크 빌딩 인사이트를 받아보세요

매주 실행 가능한 플레이북, 벤치마크, 제품 업데이트를 받아보는 SEO 팀에 합류하세요.