User-agent: *
Allow: /

# Sitemap
Sitemap: https://rf4.lilishare.com/sitemap.xml

# 允许所有搜索引擎爬取
Crawl-delay: 1

# 禁止爬取敏感目录
Disallow: /admin/
Disallow: /private/
Disallow: /temp/
Disallow: /logs/
Disallow: /backup/

# 允许爬取所有页面
Allow: /index.html
Allow: /map.html
Allow: /bait.html
Allow: /coordinate.html
Allow: /player.html
Allow: /player-detail.html
Allow: /about.html
Allow: /guides.html
Allow: /setups.html
Allow: /clips.html
Allow: /login.html
Allow: /regist.html
Allow: /profile.html
Allow: /fishpost.html
Allow: /fishpost-browse.html

# 允许爬取静态资源
Allow: /css/
Allow: /js/
Allow: /images/
Allow: /fonts/
Allow: /favicon.ico
Allow: /manifest.json

# 禁止爬取API接口（避免无意义的爬取）
Disallow: /api/
Disallow: /api/v1/

# 允许爬取参数化页面（SEO友好）
Allow: /map.html?location=*
Allow: /bait.html?fish=*
Allow: /bait.html?location=*
Allow: /coordinate.html?map=*
Allow: /coordinate.html?fish=*
Allow: /index.html?search=*

# 特殊搜索引擎优化
User-agent: Googlebot
Crawl-delay: 0
Allow: /

User-agent: Baiduspider
Crawl-delay: 1
Allow: /

User-agent: Bingbot
Crawl-delay: 1
Allow: /

User-agent: YandexBot
Crawl-delay: 2
Allow: /