Инструменты
Генератор Clean-param
Лимитов нет. Авторизуйтесь!
Генератор Clean-param для robots.txt
Загрузи список исключенных страниц из Яндекса и получи значение директивы Clean-param для файла robots.txt.
Получить значение директивы
100 лимитов
Популярные вопросы
Как инструмент работает
Инструмент собирает все параметры URL по списку страниц и формирует директиву Clean-param с этими параметрами для указания в файле robots.txt.
Зачем необходимо указывать Clean-param для Яндекса
Указание Clean-param в файле robots.txt позволяет избежать появления технических дублей страниц в Яндексе, подклеивает их к основным страницам (без этих параметров в URL).
Дополнительно это позволяет уменьшить сканирование поисковым роботом Яндекса страниц с перечисленными параметрами, что может снизить нагрузку на сервер (где расположен сайт), а также позволяет поисковому роботу расходовать краулинговый бюджет на более ценные для продвижения страницы.
Как получить список страниц
Получите список страниц своего сайта с параметрами в Яндекс Вебмастере: в разделе «Страницы в поиске» выберите сайт и нажмите на вкладку «Исключенные страницы» под графиком. Скачайте эту таблицу (XLS или CSV) по кнопке внизу и скопируйте из неё полученный список страниц в наш инструмент.
Если ваш сайт только создан или только добавлен в Яндекс Вебмастер, то вы можете просто ввесть его адрес в качестве страниц с параметрами и затем использовать расширенный вид директивы с популярными параметрами.
Добавление корректно составленной директивы Clean-param в robots.txt для Яндексе позволяет избежать проблем с дублями страниц с параметрами, а также повысить эффективность работы сканирующего поискового робота.
— Илья Горбачев, SEO-специалист и автор инструмента
Пользователи этого инструмента также используют
Проверка региональности в Яндексе
Проверьте присвоен ли нужный регион сайту в Яндексе с помощью Я.Вебмастера или Я.Бизнеса (ex-Справочника).
Проверка значения Яндекс ИКС
Быстрая проверка значений Яндекс ИКС для списка сайтов.
Проверка основных редиректов
Проверьте наличие редиректов с зеркал сайта, а также технические дубли страниц.
Проверка позиций сайта
Выгрузите позиции сайта в поиске по интересующим запросам.
Скоринг поисковых запросов
Соберите основные характеристики запросов, чтобы составить оптимальное семантическое ядро.
Парсер тематических слов
Соберите все связанные с поисковым запросом слова и словосочетания.