# robots.txt untuk Kementerian Lingkungan Hidup / Badan Pengendalian Lingkungan Hidup
# Website: https://kemenlh.go.id
# Deskripsi: Website resmi Kementerian Lingkungan Hidup dan Badan Pengendalian Lingkungan Hidup Republik Indonesia
# Menyediakan informasi terkini mengenai lingkungan hidup, pelestarian alam, kebijakan lingkungan, dan layanan publik

User-agent: *
Allow: /
Disallow: /dashboard/
Disallow: /system/
Disallow: /application/
Disallow: /phpmyadmin11/
Disallow: /backup/
Disallow: /uploads/
Disallow: /new/
Disallow: /*.sql$
Disallow: /*.log$
Disallow: /index.php?p=dashboard

# Allow important pages
Allow: /home
Allow: /publikasi
Allow: /berita
Allow: /kegiatan
Allow: /tentang-kami
Allow: /profil-menteri
Allow: /unit-kerja
Allow: /pengumuman
Allow: /siaran-pers
Allow: /peraturan
Allow: /informasi-publik
Allow: /kontak

# Sitemap (XML statis agar bisa dibaca mesin pencari)
Sitemap: https://kemenlh.go.id/sitemap.xml

# Crawl-delay untuk menghindari overload server
Crawl-delay: 1

# Specific rules for major search engines
User-agent: Googlebot
Allow: /
Disallow: /dashboard/
Disallow: /system/
Disallow: /phpmyadmin11/

User-agent: Bingbot
Allow: /
Disallow: /dashboard/
Disallow: /system/
Disallow: /phpmyadmin11/

User-agent: Yandex
Allow: /
Disallow: /dashboard/
Disallow: /system/
Disallow: /phpmyadmin11/