Страница 1 из 1

robots.txt

СообщениеДобавлено: 02 фев 2012, 16:09
max2012
Сразу прошу прощения если эта тема уже существует..........
В готовых сборках (BB3x Standart 3.0.10) уже есть файл robots.txt - хотелось бы узнать, что еще нужно самому дописывать в этот файл или нет :?:
так как к примеру по этой местной статье http://bb3x.ru/a_other/other_robots вообще некоторые пункты другие......

СообщениеДобавлено: 02 фев 2012, 19:56
crash
max2012
если вы считаете, что надо что-то дописать, тогда дописывайте

Re: robots.txt

СообщениеДобавлено: 02 фев 2012, 21:52
max2012
меня интересуют строки которых нет в файле робота у сборок
    Host: мой сайт.ru
    Sitemap: /sitemap.php
    Clean-param: sid /index.php
    Clean-param: sid /viewforum.php
    Clean-param: sid /viewtopic.php
вот хотелось бы узнать нужны они или нет?