# --- IZINKAN MESIN PENCARI UTAMA (Google, Bing, dll) ---
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

# --- ATURAN UMUM UNTUK BOT LAINNYA ---
User-agent: *
Allow: /
# Blokir akses ke direktori sensitif atau halaman sistem
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /cart/
Disallow: /checkout/
Disallow: /search/
Disallow: /tmp/
Disallow: /?   # Mencegah crawling berlebihan pada URL parameter dinamis yang tidak penting

# --- PENGATURAN AI CRAWLERS (Opsional) ---
# Jika Anda ingin melarang konten Anda diserap oleh bot AI pelatih model:
User-agent: GPTBot
Disallow: /

User-agent: OAI-SearchBot
Allow: /    # Izinkan bot pencari dari OpenAI jika ingin tampil di ChatGPT Search

User-agent: ClaudeBot
Disallow: /

User-agent: PerplexityBot
Allow: /    # Izinkan jika ingin masuk dalam indeks sitasi Perplexity

# --- LOKASI SITEMAP ---
Sitemap:https://www.bvoliveiradohospital.com/index.php/asso/histo sitemap.xml