User-agent: *                  # правила для всех роботов
Disallow: /manager/            # авторизация
Disallow: /assets/components/  # папка с файлами modx пакетов
Disallow: /core/               # папка с системными файлами modx
Disallow: /connectors/         # папка с системными файлами modx
Disallow: /index.php           # дубль главной страницы index.php
Disallow: */index.php           # дубль главной страницы index.php
Disallow: /index.php* 
Disallow: *?*                  # удаляем дубли для всех страниц (с параметрами)
Disallow: /logs/
Disallow: *openstat=           # ссылки с метками openstat
Disallow: *from=               # ссылки с метками from
Disallow: *utm*=               # ссылки с utm-метками
Disallow: *id=*
Disallow: *event_date=*
Disallow: *searchword=*
Disallow: *?page=*
Disallow: *?q=*
Disallow: *start=*
Disallow: *?selectOpt=*
Disallow: *code=*
Disallow: *Itemid*
Disallow: *search*
Disallow: *stylesheet*
Allow: /*.jpg                  # здесь и далее открываем для индексации изображения, скрипты и прочие файлы
Allow: /*.jpeg
Allow: /*.gif
Allow: /*.png
Allow: /*.pdf
Allow: /*.doc
Allow: /*.docx
Allow: /*.xls
Allow: /*.xlsx
Allow: /*.ppt
Allow: /*.pptx
Allow: /*.css
Allow: /*.js
Disallow: /onlinebooks/
Disallow: /idk/
Disallow: /artnight*
Disallow: /my/
Disallow: */news/n2023-*
Disallow: */news/n2022*
Disallow: */news/n2021*
Disallow: */news/n2020*
Disallow: */news/n2019*
Disallow: /vic/2021/*
Disallow: /vic/1june/
Disallow: /vic/pismennost/
Disallow: /readfamily/victorina/
Disallow: /vic/idk/
Disallow: /vic/orenkraj/
Disallow: /vic/04112020/
Disallow: /vic/sunpolka/
Disallow: /vic/aksakov1/
Disallow: /vic/aksakov2/
Disallow: /vic/slagaemue-zdoroviya/
Disallow: /vic/100/
Disallow: /vic/zakon-ml/
Disallow: /vic/75/
Disallow: /vic/zakon-st/
Disallow: /vic/zakon-ml/
Disallow: /vic/sunpolka/
Disallow: /reg/orendostoevskii/
Disallow: /vic/index33.php
Disallow: /vic/polevoj/
Disallow: /vic/60let/
Disallow: /ural2019/
Disallow: /vic/voronkova/
Disallow: /vic/idk2/
Disallow: /ubi/60/
Disallow: /kulture-school/statistics-year.php
Disallow: /newyear/profile.php
Disallow: /ural2021/
Disallow: /konkurs/pyh-platok/statistics.php
Disallow: /kulture-school/stat-prev.php
Disallow: /ural2022/
Disallow: /kulture-school/users.php
Disallow: /images/mygal/
Disallow: /newbooks/poznavatelnoe/pozn*
Disallow: /newbooks/piv/piv*
Disallow: /orenburjie/
Disallow: /soldat/
Disallow: /newbooks/knigi-dlya-dushi/
Disallow: /newbooks/notall/
Disallow: /cgi-bin/*
Disallow: /irb/
Clean-param: ref /ural2021/work.php
Clean-param: ref /ural2021/nom.php
Clean-param: ref /ural2021/user.php
Host: https://oodb.ru
Sitemap: https://oodb.ru/sitemap.xml