# ==========================================
# robots.txt для RusCOD
# Управление индексацией поисковыми системами
# ==========================================

User-agent: *
Allow: /

# Разрешаем индексировать все основные страницы
Allow: /index
Allow: /stats
Allow: /screenshots
Allow: /bans
Allow: /forum
Allow: /chat
Allow: /demo
Allow: /check

# Запрещаем индексировать служебные директории
Disallow: /admin/
Disallow: /config/
Disallow: /database/
Disallow: /forum/database/
Disallow: /forum/config/
Disallow: /includes/
Disallow: /temp/
Disallow: /backup/
Disallow: /logs/

# Запрещаем индексировать системные файлы
Disallow: /*.sql$
Disallow: /*.log$
Disallow: /*.sqlite$
Disallow: /*.db$
Disallow: /.htaccess
Disallow: /install.php
Disallow: /debug
Disallow: /test

# Разрешаем CSS, JS и изображения
Allow: /css/
Allow: /js/
Allow: /images/
Allow: /fonts/

# Карта сайта
Sitemap: http://ruscod.ru/sitemap.xml
Sitemap: http://ruscod.ru/sitemap.php

# Яндекс
User-agent: Yandex
Allow: /
Crawl-delay: 1

# Google
User-agent: Googlebot
Allow: /
Crawl-delay: 1

# Bing
User-agent: Bingbot
Allow: /
Crawl-delay: 1

# Другие поисковики
User-agent: *
Crawl-delay: 1