# DestockAvenir - Robots.txt
# Autoriser tous les robots de recherche

User-agent: *
Allow: /
Allow: /catalogue
Allow: /produit/
Allow: /categories
Allow: /api/sitemap.xml
Disallow: /admin
Disallow: /panier
Disallow: /checkout
Disallow: /api/
Disallow: /compte

# Sitemap dynamique (inclut tous les produits actifs en temps réel)
Sitemap: https://destockavenir.com/api/sitemap.xml

# Robots spécifiques
User-agent: Googlebot
Allow: /
Allow: /api/sitemap.xml
Disallow: /admin
Disallow: /panier
Disallow: /checkout
Disallow: /api/
Disallow: /compte

User-agent: Bingbot
Allow: /
Allow: /api/sitemap.xml
Disallow: /admin
Disallow: /panier
Disallow: /checkout
Disallow: /api/
Disallow: /compte

# Bloquer les mauvais bots
User-agent: AhrefsBot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: MJ12bot
Disallow: /

# Crawl delay (éviter surcharge serveur)
Crawl-delay: 1