robots.txt

💡 초보자 설명

검색 로봇이 들어가도 되는 길을 적어 둔 안내 파일

🧠 쉬운 비유·기억법

쉽게 말하면, 가게 뒷문에 붙인 ‘관계자 외 출입 금지’ 표지입니다.

📌 실제 사용 상황

`https://도메인/robots.txt`를 열어 Disallow가 있으면 그 경로는 검색에서 빼 달라는 뜻입니다.

⚠️ 주의사항

관리자·개인 페이지를 막지 않으면 검색에 노출될 수 있습니다. 반대로 전부 막으면 사이트가 검색되지 않습니다.