User-agent: * Disallow: /cgi-bin Disallow: /*? # все параметры запроса Disallow: /*& # все параметры запроса Disallow: /wp-json/ # Disallow: /wp-includes/ # Disallow: /wp-content/plugins/ # плагины Disallow: /wp-content/cache/ # кеш Disallow: /wp-content/languages/ # языковые файлы Disallow: /wp-admin/ # админка Disallow: /tests/ # #Disallow: /xml/ # Disallow: /search # поиск Disallow: /author/ # архив автора Disallow: /*/trackback # закрывает уведомления Disallow: /*/feed # все фиды Disallow: /*/embed # все встраивания Disallow: /*/page/ # все виды пагинации Disallow: /xmlrpc.php Disallow: /forum/mcp.php # Закрыли модераторский раздел Disallow: /forum/ucp.php # Закрыли пользовательский раздел Allow: /forum/adm/index.php Disallow: /forum/search.php # Закрыли поиск по форуму Allow: /my/*? # Разрешили параметры личного кабинета, чтобы запретить полностью индексирование через noindex Allow: /t/*? # Разрешили параметры тех. страниц, чтобы запретить полностью индексирование через noindex Allow: /m/*? Disallow: /forum/m/ # Закрыли раздел пользователей Disallow: /conf/ # Сайты конференции Disallow: /expo/ # Сайты выставки Disallow: /crm2/ Disallow: /sendy/ Disallow: /home/ Disallow: /newsline/pages/* Disallow: /r/ # Рекламная система Disallow: /*/news/ # Закрыли каталог новостей Allow: /news/*.html # Открыли индивидуальные страницы новостей Disallow: /news/*.html? # Закрыли доступ для идивидуальных страниц новостей со знаком ? Disallow: /*/articles/ # Закрыли каталог статей Allow: /articles/*.html # Открыли индивидуальные страницы статей Disallow: /articles/*.html? # Закрыли доступ для идивидуальных страниц статей со знаком ? Allow: /infolenta/page/ # открываем постраничную навигацию в инфоленте Disallow: /infolenta/page/*? # Закрыли постраничную навигацию в инфоленте со знаком ? Allow: /forum/page/ # открываем постраничную навигацию в инфоленте Disallow: /forum/page/? # закрыли постраничную навигацию на форуме со знаком ? Allow: /*/uploads # открываем uploads Disallow: /*/uploads/*? # закрыли uploads со знаком ? Allow: /*/*.js # внутри /wp- (/*/ - для приоритета) #Disallow: /*/*.js? # внутри /wp- (/*/ - для приоритета) со знаком ? Allow: /*/*.css # внутри /wp- (/*/ - для приоритета) #Disallow: /*/*.css? # внутри /wp- (/*/ - для приоритета) со знаком ? Allow: /*.png # картинки в плагинах, cache папке и т.д. Disallow: /*.png? # картинки в плагинах, cache папке и т.д. со знаком ? Allow: /*.jpg # картинки в плагинах, cache папке и т.д. Disallow: /*.jpg? # картинки в плагинах, cache папке и т.д. со знаком ? Allow: /*.jpeg # картинки в плагинах, cache папке и т.д. Disallow: /*.jpeg? # картинки в плагинах, cache папке и т.д. со знаком ? Allow: /*.gif # картинки в плагинах, cache папке и т.д. Disallow: /*.gif? # картинки в плагинах, cache папке и т.д. со знаком ? Disallow: /*?*.png # паттерны вида /*.jpg приоритетнее чем /*?, поэтому случай, когда в параметре есть ссылка на картинки, заприщаем отдельно. Disallow: /*?*.jpg Disallow: /*?*.jpeg Disallow: /*?*.gif Host: https://oborot.ru Allow: /my/blog/embedded/edit/* Sitemap: https://oborot.ru/xml/sitemap/mapindex.xml