# ============================================
# Chatisit.com - Robots.txt
# Optimisé pour Chat Gratuit de Rencontre
# ============================================

# 1. ACCÈS LIBRE POUR TOUS LES BONS ROBOTS
User-agent: *
Allow: /
Allow: /index.html
Allow: /mentions-legales.html
Allow: /confidentialite.html
Allow: /contact.php

# 2. BLOQUER LES ZONES SENSIBLES & PRIVÉES
Disallow: /admin.php
Disallow: /api/
Disallow: /includes/
Disallow: /css/
Disallow: /js/
Disallow: /config/
Disallow: /private_chat.php
Disallow: /messages.php
Disallow: /chat.php?*
Disallow: /*?user_id=*
Disallow: /*?token=*
Disallow: /*?session=*

# 3. ÉVITER LE DUPLICATE CONTENT (Paramètres d'URL)
Disallow: /*&
Disallow: /*?sort=
Disallow: /*?page=

# 4. EMPLACEMENT DU SITEMAP
Sitemap: https://www.chatisit.com/sitemap.xml

# 5. DIRECTIVES SPÉCIFIQUES PAR ROBOT (Optionnel mais recommandé)
# Googlebot a besoin de plus d'accès pour indexer correctement
User-agent: Googlebot
Allow: /register.php
Allow: /login.php
Allow: /forgot_password.php
Crawl-delay: 1

# Bingbot
User-agent: bingbot
Allow: /register.php
Allow: /login.php
Crawl-delay: 2

# Bloquer les robots malveillants connus
User-agent: AhrefsBot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

User-agent: Baiduspider
Disallow: /