Вопрос про ROBOTS.txt
Здравствуйте,нужно ли закрывать страницы пангинаций? у меня на сайте 380 страниц и навигация вверху и внизу,и надо ли закрывать RSS? Если всё это надо закрывать то скажите правильный это кусочек текста с robots?
User-agent: *
Allow: /uploads/posts/
Disallow: /page/
Disallow: */page/*
Disallow: /engine/rss.php
Источник:dle-faq.pro, DLE
User-agent: *
Allow: /uploads/posts/
Disallow: /page/
Disallow: */page/*
Disallow: /engine/rss.php
Источник:dle-faq.pro, DLE
Похожие новости
- Blitz - шаблон для DLE
- Весь май две лицензии по цене одной
- Rubik - универсальный шаблон
- Telegram Instant View для DLE
- Быстрый поиск новостей только по заголовкам - модуль ModLiveSearch
- DLE: Telegram Instant View
- Весна скидок с DataLife Engine!
- DataLife Engine v.18.0 Final Release
- DataLife Engine v.18.0 Press Release
- Free-Plums на dle 17.3