# Shirabe Calendar API — robots.txt # AIクローラー・AI検索エンジンを歓迎します / AI crawlers welcome User-agent: * Allow: / # Explicit allowlist for major AI crawlers User-agent: GPTBot Allow: / User-agent: ChatGPT-User Allow: / User-agent: ClaudeBot Allow: / User-agent: Claude-Web Allow: / User-agent: anthropic-ai Allow: / User-agent: PerplexityBot Allow: / User-agent: Google-Extended Allow: / User-agent: Bytespider Allow: / User-agent: cohere-ai Allow: / User-agent: Applebot-Extended Allow: / User-agent: FacebookBot Allow: / User-agent: Diffbot Allow: / # Sitemap hints(sitemap-index 経由で全 sub-sitemap が auto-discovery されるが、 # 一部 AI クローラー / search engine は sub-sitemap 個別 hint を期待するため明示) Sitemap: https://shirabe.dev/sitemap.xml Sitemap: https://shirabe.dev/sitemap-docs.xml Sitemap: https://shirabe.dev/sitemap-days-1.xml Sitemap: https://shirabe.dev/sitemap-days-2.xml Sitemap: https://shirabe.dev/sitemap-days-3.xml Sitemap: https://shirabe.dev/sitemap-days-4.xml Sitemap: https://shirabe.dev/sitemap-purposes.xml Sitemap: https://shirabe.dev/address/sitemap-areas.xml Sitemap: https://shirabe.dev/corporation/sitemap-new.xml Sitemap: https://shirabe.dev/text/sitemap-names.xml # llms.txt / llms-full.txt(LLM 向けサイト要約 / 詳細版、AI クローラー discovery hint) # 本ファイルからの直接参照は標準 robots.txt 仕様外だが、 # Allow: / で既に全許可済のため AI クローラーは自由 fetch 可能。