User-agent: *
Allow: /
Allow: /api/v1/og/
Disallow: /admin/
Disallow: /api/
Disallow: /dashboard/
Disallow: /owner/
Disallow: /signin
Disallow: /profile/

# AI-training / scraper crawlers — blocked (see src/pages/robots.txt.ts)
User-agent: GPTBot
Disallow: /

User-agent: meta-externalagent
Disallow: /

User-agent: DataForSeoBot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: Applebot
Crawl-delay: 1

Sitemap: https://esalah.com/sitemap-index.xml
Sitemap: https://esalah.com/sitemap-static.xml
Sitemap: https://esalah.com/sitemap-cities.xml
Sitemap: https://esalah.com/sitemap-mosques.xml
Sitemap: https://esalah.com/sitemap-places.xml
Sitemap: https://esalah.com/sitemap-geo.xml
Sitemap: https://esalah.com/ar/sitemap-index.xml
Sitemap: https://esalah.com/ur/sitemap-index.xml
Sitemap: https://esalah.com/fa/sitemap-index.xml
Sitemap: https://esalah.com/ps/sitemap-index.xml
Sitemap: https://esalah.com/tr/sitemap-index.xml
Sitemap: https://esalah.com/id/sitemap-index.xml
Sitemap: https://esalah.com/ms/sitemap-index.xml
Sitemap: https://esalah.com/bn/sitemap-index.xml
Sitemap: https://esalah.com/hi/sitemap-index.xml
Sitemap: https://esalah.com/ta/sitemap-index.xml
Sitemap: https://esalah.com/th/sitemap-index.xml
Sitemap: https://esalah.com/vi/sitemap-index.xml
Sitemap: https://esalah.com/tl/sitemap-index.xml
Sitemap: https://esalah.com/fr/sitemap-index.xml
Sitemap: https://esalah.com/es/sitemap-index.xml
Sitemap: https://esalah.com/pt/sitemap-index.xml
Sitemap: https://esalah.com/it/sitemap-index.xml
Sitemap: https://esalah.com/de/sitemap-index.xml
Sitemap: https://esalah.com/nl/sitemap-index.xml
Sitemap: https://esalah.com/pl/sitemap-index.xml
Sitemap: https://esalah.com/sq/sitemap-index.xml
Sitemap: https://esalah.com/bs/sitemap-index.xml
Sitemap: https://esalah.com/ru/sitemap-index.xml
Sitemap: https://esalah.com/zh/sitemap-index.xml
Sitemap: https://esalah.com/ja/sitemap-index.xml
Sitemap: https://esalah.com/ko/sitemap-index.xml
Sitemap: https://esalah.com/sw/sitemap-index.xml
Sitemap: https://esalah.com/ha/sitemap-index.xml
Sitemap: https://esalah.com/so/sitemap-index.xml