Правильный ROBOTS.TXT для Joomla

Для тех кто ищет, тот всегда найдет... выкладываю самый правильный вариант файла ROBOTS.TXT для Joomla. Откровенно говоря, Джумла вызывает у меня по меньшей мере рвотный рефлекс... несмотря на то, что сама платформа с рождения глюченая (как компьютерная игра Counter-Strike 1.6) и ее поведение сравнимо с женской логикой, она пользуется большой популярностью у «школоты» и горе-веб-студий. К моему великому сожалению, сайтов на этой платформе крайне много, и мне как оптимизатору приходится частенько сталкиваться с этим унылым говном.

Ладно, не будем оскорблять столь популярную CMS. А то фанаты сие говна забросают меня тухлыми помидорами и будут гнать со сцены. И так собственно сам файл ROBOTS.TXT: 

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/

User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Host: site.ru
Sitemap: http://site.ru/sitemap.xml

А если у нас еще установлен Virtuemart, то добавляем к основному robots.txt вот этот кусок кода:

Disallow: /components/com_akeeba/
Disallow: /components/com_banners/
Disallow: /components/com_extplorer/
Disallow: /components/com_finder/
Disallow: /components/com_jce/
Disallow: /components/com_mailto/
Disallow: /components/com_newsfeeds/
Disallow: /components/com_search/
Disallow: /components/com_users/
Disallow: /components/com_weblinks/
Disallow: /components/com_wrapper/
Disallow: /components/com_xmap/

Или вот добавить такой вариант:

Allow: /components/com_virtuemart/
Disallow: /components/

Метки записи:

,