# ashareapi.com — robots.txt
# 欢迎搜索引擎与 AI 爬虫抓取（内容公开，便于被引用与推荐）
User-agent: *
Allow: /

# AI 检索 / 引用型
User-agent: OAI-SearchBot
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Claude-SearchBot
Allow: /

# AI 用户触发型
User-agent: ChatGPT-User
Allow: /

User-agent: Perplexity-User
Allow: /

User-agent: Claude-User
Allow: /

User-agent: MistralAI-User
Allow: /

# AI 训练型
User-agent: GPTBot
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: Google-Extended
Allow: /

User-agent: Applebot-Extended
Allow: /

User-agent: CCBot
Allow: /

User-agent: Bytespider
Allow: /

User-agent: meta-externalagent
Allow: /

# 国内搜索引擎 / AI
User-agent: Baiduspider
Allow: /

User-agent: Baiduspider-render
Allow: /

User-agent: Sogou web spider
Allow: /

User-agent: Sogou inst spider
Allow: /

User-agent: 360Spider
Allow: /

# 神马搜索（UC / 阿里，移动端）
User-agent: YisouSpider
Allow: /

# 国内 AI 搜索 / 大模型
# ⚠️ 说明（2026-09-26 核实）：以下 UA **多数没有官方爬虫文档** ——
#    Kimi / DeepSeek / 通义 / 智谱 的官网均未找到爬虫说明页（只有字节 Bytespider 有官方 UA+IP 段文档：
#    https://zhanzhang.toutiao.com/docs/intro/26899）。
#    这里显式列出属**善意声明**（`User-agent: *` 本已 Allow），⛔ 不代表这些 UA 真实存在。
User-agent: DeepSeekBot
Allow: /

User-agent: Kimi-SearchBot
Allow: /

User-agent: ChatGLM-Spider
Allow: /

User-agent: QwenBot
Allow: /

User-agent: TongyiBot
Allow: /

User-agent: PetalBot
Allow: /

# 搜索引擎
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

User-agent: Applebot
Allow: /

# SEO / 监测工具
User-agent: AhrefsBot
Allow: /

User-agent: SemrushBot
Allow: /

User-agent: DotBot
Allow: /

# 通用抓取器
User-agent: YandexBot
Allow: /

User-agent: MJ12bot
Allow: /

# Agent Skills 发现索引（机器可读，供支持该标准的客户端读取）
Allow: /.well-known/agent-skills/

Sitemap: https://ashareapi.com/sitemap.xml
# 每日报告（**动态生成、不在 Astro 构建里** → 自带 sitemap，2026-09-22 加）
Sitemap: https://ashareapi.com/daily/sitemap.xml