Просто скопируйте из webmaster yandex все URL с дублями, и где нужен clean-param преобразует url и выведит данные для robots.txt с clean param
Мы предлагаем передовые решения в области SEO продвижения и оптимизации вашего сайта. Улучшите позиции в поисковых системах и получите мощный инструмент для сбора и анализа данных
Просто скопируйте из webmaster yandex все URL с дублями, и где нужен clean-param преобразует url и выведит данные для robots.txt с clean param