# R星51精选漫画 - robots.txt
# 百度爬虫配置

User-agent: *
Allow: /
Allow: /?page=*
Disallow: /admin/
Disallow: /private/
Disallow: /temp/
Disallow: /*.php$
Disallow: /*.json$

# 百度爬虫特殊配置
User-agent: Baiduspider
Allow: /
Allow: /?page=*
Allow: /assets/

# 谷歌爬虫配置
User-agent: Googlebot
Allow: /

# 其他爬虫
User-agent: *
Crawl-delay: 1

# Sitemap位置
Sitemap: https://uwaynj.cn/sitemap.xml