Правильный robots.txt для drupal
При запуске сайта важно проверить чтобы лишние страницы не попадали в индекс. Мы приводим список дополнительных интсрукций в файл robots.txt который убережет ваш сайт на Drupal от гнева поисковых систем.
NB! На сайте должны быть включено ЧПУ.
#
1