Запрещаем весь сайт к индексации, кроме главной страницы
Используем спецсимвол $, который отменит превентивный запрет на индексацию.
Allow: /$ Disallow: /
Разрешаем к индексации только главную страницу!
А теперь запрещаем к индексации только главную страницу:
Disallow: /$
Запрещаем к индексации все GET-запросы
Disallow: /*?*
Поможет избежать дублей, созданных вашей CMS системой.
Проверка на дубли в яндексе, введите следующую конструкцию в поисковую строку:
грузоперевозки site:gorky-transit.ru
Спасибо за внимание =)