# === 1. Инструкции для поискового робота Google (Googlebot) ===
User-Agent: Googlebot

# 1.1. Основные системные папки Битрикс
Disallow: /bitrix/
Disallow: /auth/
Disallow: /auth.php
Disallow: /login/
Disallow: /personal/
Disallow: /search/
Disallow: /dev.php

# 1.2. Закрываем мусорные скрипты и компоненты
Disallow: /local/components/
Disallow: /local/templates/*/components/
Disallow: /*ajax.php
Disallow: /*ajax_form.php

# 1.3. Блокируем технические параметры фильтра
Disallow: /*arrFilterSection

# 1.4. Фильтры, сортировки и вид (УНИВЕРСАЛЬНОЕ ПРАВИЛО)
Disallow: /*/filter/
Disallow: /*?set_filter=
Disallow: /*?sort=
Disallow: /*?view=
Disallow: /*?print=
Disallow: /*?color=
Disallow: /*?size=
Disallow: /*?del_filter=

# 1.5. Пагинация
Disallow: /*?PAGEN_1=
Disallow: /*?PAGEN_2=
Disallow: /*?PAGEN_3=

# 1.6. Рекламные метки и мусор
Disallow: /*?utm_source=
Disallow: /*?utm_medium=
Disallow: /*?utm_campaign=
Disallow: /*?utm_content=
Disallow: /*?utm_term=
Disallow: /*?yclid=
Disallow: /*?etext=
Disallow: /*?ybaip=
Disallow: /*?ch=
Disallow: /*action=
Disallow: /*bitrix_*=
Disallow: /*backurl=
Disallow: /*index.php$
Disallow: /*?$

# 1.7. AJAX, кеш и прочее
Disallow: /local/cache/
Disallow: /local/backups/
Disallow: /upload/tmp/
Disallow: /upload/cache/
Disallow: /upload/support/

# 1.8. Разрешаем сканирование важных файлов
Allow: /bitrix/components/
Allow: /bitrix/cache/
Allow: /bitrix/js/
Allow: /bitrix/templates/
Allow: /bitrix/panel/
Allow: /upload/
Allow: /*.css
Allow: /*.js
Allow: /*.jpg
Allow: /*.jpeg
Allow: /*.png
Allow: /*.gif
Allow: /*.svg
Allow: /*.woff
Allow: /*.woff2
Allow: /*.ttf

---

# === 2. Инструкции для поискового робота Yandex ===
User-Agent: Yandex

# 2.1. Основные системные папки Битрикс
Disallow: /bitrix/
Disallow: /auth/
Disallow: /auth.php
Disallow: /login/
Disallow: /personal/
Disallow: /search/
Disallow: /dev.php

# 2.2. Закрываем мусорные скрипты и компоненты
Disallow: /local/components/
Disallow: /local/templates/*/components/
Disallow: /*ajax.php
Disallow: /*ajax_form.php

# 2.3. Блокируем технические параметры фильтра
Disallow: /*arrFilterSection

# 2.4. Фильтры, сортировки и вид (УНИВЕРСАЛЬНОЕ ПРАВИЛО)
Disallow: /*/filter/
Disallow: /*?set_filter=
Disallow: /*?sort=
Disallow: /*?view=
Disallow: /*?print=
Disallow: /*?color=
Disallow: /*?size=
Disallow: /*?del_filter=

# 2.5. Пагинация
Disallow: /*?PAGEN_1=
Disallow: /*?PAGEN_2=
Disallow: /*?PAGEN_3=

# 2.6. Рекламные метки и мусор
Disallow: /*?utm_source=
Disallow: /*?utm_medium=
Disallow: /*?utm_campaign=
Disallow: /*?utm_content=
Disallow: /*?utm_term=
Disallow: /*?yclid=
Disallow: /*?etext=
Disallow: /*?ybaip=
Disallow: /*?ch=
Disallow: /*action=
Disallow: /*bitrix_*=
Disallow: /*backurl=
Disallow: /*index.php$
Disallow: /*?$

# 2.7. AJAX, кеш и прочее
Disallow: /local/cache/
Disallow: /local/backups/
Disallow: /upload/tmp/
Disallow: /upload/cache/
Disallow: /upload/support/

# 2.8. Разрешаем сканирование важных файлов
Allow: /bitrix/components/
Allow: /bitrix/cache/
Allow: /bitrix/js/
Allow: /bitrix/templates/
Allow: /bitrix/panel/
Allow: /upload/
Allow: /*.css
Allow: /*.js
Allow: /*.jpg
Allow: /*.jpeg
Allow: /*.png
Allow: /*.gif
Allow: /*.svg
Allow: /*.woff
Allow: /*.woff2
Allow: /*.ttf

# 2.9. Указываем главное зеркало
Host: https://svetzavod.ru

---

# === 3. Инструкции для ВСЕХ ОСТАЛЬНЫХ роботов ===
User-Agent: *

# 3.1. Основные системные папки Битрикс
Disallow: /bitrix/
Disallow: /auth/
Disallow: /auth.php
Disallow: /login/
Disallow: /personal/
Disallow: /search/
Disallow: /dev.php

# 3.2. Закрываем мусорные скрипты и компоненты
Disallow: /local/components/
Disallow: /local/templates/*/components/
Disallow: /*ajax.php
Disallow: /*ajax_form.php

# 3.3. Блокируем технические параметры фильтра
Disallow: /*arrFilterSection

# 3.4. Фильтры, сортировки и вид (УНИВЕРСАЛЬНОЕ ПРАВИЛО)
Disallow: /*/filter/
Disallow: /*?set_filter=
Disallow: /*?sort=
Disallow: /*?view=
Disallow: /*?print=
Disallow: /*?color=
Disallow: /*?size=
Disallow: /*?del_filter= # 3.5. Пагинация
Disallow: /*?PAGEN_1=
Disallow: /*?PAGEN_2=
Disallow: /*?PAGEN_3=

# 3.6. Рекламные метки и мусор
Disallow: /*?utm_source=
Disallow: /*?utm_medium=
Disallow: /*?utm_campaign=
Disallow: /*?utm_content=
Disallow: /*?utm_term=
Disallow: /*?yclid=
Disallow: /*?etext=
Disallow: /*?ybaip=
Disallow: /*?ch= 
Disallow: /*action=
Disallow: /*bitrix_*=
Disallow: /*backurl=
Disallow: /*index.php$
Disallow: /*?$

# 3.7. AJAX, кеш и прочее
Disallow: /local/cache/
Disallow: /local/backups/
Disallow: /upload/tmp/
Disallow: /upload/cache/
Disallow: /upload/support/

# 3.8. Разрешаем сканирование важных файлов
Allow: /bitrix/components/
Allow: /bitrix/cache/
Allow: /bitrix/js/
Allow: /bitrix/templates/
Allow: /bitrix/panel/
Allow: /upload/
Allow: /*.css
Allow: /*.js
Allow: /*.jpg
Allow: /*.jpeg
Allow: /*.png
Allow: /*.gif
Allow: /*.svg
Allow: /*.woff
Allow: /*.woff2
Allow: /*.ttf

# === 4. Указываем путь к карте сайта (Sitemap) ===
Sitemap: https://svetzavod.ru/sitemap.xml