User-agent: *
Allow: /

# 크롤링 제외 대상 (파일 중복 및 불필요 리소스)
Disallow: /script.js
Disallow: /style.css

# 중복 파일 제외 (파일명 뒤 괄호 버전 — 크롤러가 잘못 인덱싱할 수 있음)
Disallow: /amc8_test%20(1).html
Disallow: /stats_test%20(1).html
Disallow: /math_test%20(1).html

# Sitemap 위치
Sitemap: https://topeduprep.uk/sitemap.xml

# 주요 크롤러별 크롤 딜레이 (서버 부하 방지)
User-agent: Googlebot
Allow: /
Crawl-delay: 1

User-agent: Yeti
Allow: /
Crawl-delay: 2

User-agent: Bingbot
Allow: /
Crawl-delay: 2