검색엔진 수집
화면 설명
검색엔진(구글, 네이버 등)이 사이트를 수집할 수 있는지 정하는 robots.txt 파일을 작성합니다. 저장하면 사이트 주소/robots.txt에 바로 반영됩니다.
사용 방법
- 검색엔진 허용: 모든 검색엔진이 사이트를 수집하도록 기본 내용을 채웁니다.
- 검색엔진 거부: 모든 검색엔진이 사이트를 수집하지 않도록 내용을 채웁니다. 개발·테스트 사이트에 사용합니다.
- 내용을 직접 고친 뒤 저장을 누릅니다.
User-agent: *
Allow: /
Disallow: /admin
Sitemap: https://example.com/sitemap.xml
운영 사이트에서 검색엔진 거부로 저장하면 검색 결과에서 사이트가 빠질 수 있습니다.