# robots.txt for bojack-horseman-quiz
# 为爬虫与 LLM 抓取提供友好指引，详情请查看 /llms.txt

User-agent: *
# 允许抓取大部分页面，但禁止调用后端或敏感目录
Allow: /
Disallow: /api/
Disallow: /keys/
Disallow: /result/

# 可选：请求友好抓取频率（非所有爬虫都支持）
Crawl-delay: 1

# 站点地图（如果存在）
Sitemap: /sitemap.xml

# 机器可读指引：LLM 数据使用偏好见 /llms.txt