User-agent: *
Allow: /
Crawl-delay: 1

# 主要検索エンジンは特に制限なし
User-agent: Googlebot
Allow: /

User-agent: Googlebot-Image
Allow: /

User-agent: Bingbot
Allow: /

# AdSense の審査・配信クローラ。Allow: / の既定で通るが、
# 「害悪ボット」のブロックを足すときに巻き込まないよう明示しておく(2026-09-16)
User-agent: Mediapartners-Google
Allow: /

# AI スクレイパー(任意で許可: 学習させたい派)
# User-agent: GPTBot
# Disallow: /
# User-agent: anthropic-ai
# Disallow: /

# 害悪ボット(必要に応じてブロック)
User-agent: SemrushBot
Disallow: /
User-agent: AhrefsBot
Disallow: /
User-agent: MJ12bot
Disallow: /

Sitemap: https://agave-navi.com/sitemap.xml