Здравствуйте. Требуется настройка .htaccess и robots.txt для cms webasyst Shop-Script. На сайте есть дубли страниц, которые нужно убрать. Примеры дублей:
и
(попадаешь на одну и ту же страницу)
и
(Ссылки со слэшем и без, а должны быть только со слэшем в конце)
– открывает страницу
и т.д. В общем можно написать любую последовательность букв и цифр после обычной ссылки, добавить в индекс гугл и в индексе появится дубль основной страницы, чем и занимаются наши конкуренты.