Правильный ROBOTS.txt для DLE

Добрался теперь и до движка Data Life Engine. Ну что же, давайте разберемся как должен выглядеть самый правильный robots.txt для DLE? Ранее я уже в своих постах писал про оптимальные robots.txt для WordPress, Drupal, Joomla, Bitrix, ModX. Но сегодня для коллекции будет DLE. По правде говоря ничего сложного, мой пример файла — это некий стандарт, который я слегка улучшил, по сути тот же самый вариант роботса можно получить установив движок из коробки, но тем не менее выкладываю свой варик для всеобщего обозрения. Пользуйтесь на здоровье, надеюсь кому-то покажется это полезным.

User-agent: *
Disallow: /backup/
Disallow: /user/
Disallow: /engine/
Disallow: /language/
Disallow: /upgrade/
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /*do=search
Host: http://site.ru
Sitemap: http://site.ru/sitemap.xml

Метки записи:

, , , ,