User-agent: *                  # Создаем секцию правил для роботов. * значит для всех
			       # роботов. Чтобы указать секцию правил для отдельного
			       # робота, вместо * укажите его имя: GoogleBot, Yandex.
Disallow: /cgi-bin             # Стандартная папка на хостинге.
Disallow: /wp-                 # Все связанное с WP - это: /wp-content /wp-admin
Disallow: /assets/
			       # /wp-includes /wp-json wp-login.php wp-register.php.
Disallow: /wp/                 # Каталог куда установлено ядро WP (если ядро установлено
			       # в подкаталог). Если WP установлен стандартно, то
			       # правило можно удалить.
Disallow: /?                   # Все параметры запроса на главной.
Disallow: *?s=                 # Поиск.
Disallow: *&s=                 # Поиск.
Disallow: /search              # Поиск.
Disallow: /author/             # Архив автора.
Disallow: */embed$             # Все встраивания.
Disallow: */page/              # Все виды пагинации.
Disallow: */xmlrpc.php         # Файл WordPress API
Disallow: *utm*=               # Ссылки с utm-метками
Disallow: *openstat=           # Ссылки с метками openstat
Allow:    */wp-*/*ajax*.php    # AJAX запросы: */admin-ajax.php */front-ajaxs.php
Allow:    */wp-sitemap         # карта сайта (главная и вложенные)
Allow:    */uploads            # открываем uploads
Allow:    */wp-*/*.js          # внутри /wp- (/*/ - для приоритета)
Allow:    */wp-*/*.css         # внутри /wp- (/*/ - для приоритета)
Allow:    */wp-*/*.png         # картинки в плагинах, cache папке и т.д.
Allow:    */wp-*/*.jpg         # картинки в плагинах, cache папке и т.д.
Allow:    */wp-*/*.jpeg        # картинки в плагинах, cache папке и т.д.
Allow:    */wp-*/*.gif         # картинки в плагинах, cache папке и т.д.
Allow:    */wp-*/*.svg         # картинки в плагинах, cache папке и т.д.
Allow:    */wp-*/*.webp        # файлы в плагинах, cache папке и т.д.
Allow:    */wp-*/*.swf         # файлы в плагинах, cache папке и т.д.
Allow:    */wp-*/*.pdf         # файлы в плагинах, cache папке и т.д.

Allow:    */assets*/*ajax*.php    # AJAX запросы: */admin-ajax.php */front-ajaxs.php
Allow:    */assets*/*.js          # внутри /wp- (/*/ - для приоритета)
Allow:    */assets*/*.css         # внутри /wp- (/*/ - для приоритета)
Allow:    */assets*/*.png         # картинки в плагинах, cache папке и т.д.
Allow:    */assets*/*.jpg         # картинки в плагинах, cache папке и т.д.
Allow:    */assets*/*.jpeg        # картинки в плагинах, cache папке и т.д.
Allow:    */assets*/*.gif         # картинки в плагинах, cache папке и т.д.
Allow:    */assets*/*.svg         # картинки в плагинах, cache папке и т.д.
Allow:    */assets*/*.webp        # файлы в плагинах, cache папке и т.д.
Allow:    */assets*/*.swf         # файлы в плагинах, cache папке и т.д.
Allow:    */assets*/*.pdf         # файлы в плагинах, cache папке и т.д.

			       # Секция правил закончена

# Одна или несколько ссылок на карту сайта (файл Sitemap). Это независимая
# директива и дублировать её для каждого User-agent не нужно. Так например
# Google XML Sitemap создает 2 карты сайта:
Sitemap: https://atn.ua/news-sitemap.xml
Sitemap: https://atn.ua/sitemap_index.xml

# Версия кода: 2.0
# Не забудьте поменять `example.com` на ваш сайт.