Вопрос про ROBOTS.txt

Все блоги / DLE движок для сайтов | 24 ноября 2012

Здравствуйте,нужно ли закрывать страницы пангинаций? у меня на сайте 380 страниц и навигация вверху и внизу,и надо ли закрывать RSS? Если всё это надо закрывать то скажите правильный это кусочек текста с robots?
User-agent: *
Allow: /uploads/posts/
Disallow: /page/
Disallow: */page/*
Disallow: /engine/rss.php

 Источник:dle-faq.pro, DLE
Перейти на сайт

Похожие новости