Просто скопируйте из webmaster yandex все URL с дублями, и где нужен clean-param преобразует url и выведит данные для robots.txt с clean param