1. Cайт при создании новой страницы формирует адрес вида:
но страница также открывается и по адресу
То же самое со всеми страницами сайта /data/content/product.php?id=...., /data/content/about.php?id=.... и т.д
В индексе находятся и те и другие страницы. Соответственно, куча дублей. Нужно склеить их через 301 редирект. Сделать этот процесс автоматическим для будущих страниц.
Также нужно настроить редирект по удаляемым страницам (т.е. дать алгоритм записи для .htaccess).
2. Нужно настроить в robots.txt правильный запрет на индексацию отдельных страниц. (Сейчас, например, если в файл внести запись:
Disallow: /catalog.htm?id=1
запрет будет распространяться на все страницы, которые начинаются с номера 1.
3. После того, как на всем сайте переписали пути (с "data/content/catalog.php?id=" на "catalog.htm?id=") вылезли ошибки:
1) Сервер не возвращает в заголовке время изменения страницы
2) Разные объявления кодовой страницы у сервера(cp1251) и в meta(cp-1251)
3) Content-Type не содержит charset для страницы
Нужно устранить.