User-agent: *
Allow: /

# 관리 페이지
Disallow: /admin/
Disallow: /secure-admin-x9k2p7/

# 보안 및 시스템 파일
Disallow: /secure/
Disallow: /private/
Disallow: /*.py$
Disallow: /db.sqlite3
Disallow: /*.pem$

# 테스트 및 에러 페이지
Disallow: /test/
Disallow: /error/
Disallow: /home_error/
Disallow: /wrong_date_today/

# 내부 API 및 Webhook
Disallow: /paypal_ipn/
Disallow: /stripe_webhook/

# 인증 페이지 (?next= 파라미터 포함 URL 인덱싱 방지)
# Disallow: /accounts/
# Disallow: /driver/

# 내부 전용 페이지 (login required)
Disallow: /easygo_review/verse/
Disallow: /easygo_review/verse_of_today/
Disallow: /easygo_review/create/
Disallow: /easygo_review/*/update/
Disallow: /easygo_review/comment/

# SMS 링크 URL (크롤러가 sms: 링크를 URL로 잘못 인식하는 경우 차단)
Disallow: /*/sms:*

# 폼 처리 URL (인덱싱 불필요)
Disallow: /*_detail/
Disallow: /confirm_booking/
Disallow: /email_dispatch/
Disallow: /sending_email_*/
Disallow: /price_detail/

# 쿼리 파라미터 URL
Allow: /easygo_review/
Allow: /easygo_review/*?page=*
Allow: /blog/?category=*

User-agent: Barkrowler
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: BacklinksExtendedBot
Disallow: /

# Sitemap
Sitemap: https://easygoshuttle.com.au/sitemap.xml