разве? мне известно обратное..
и запрет и разрешение .. хотя - я просто мог ошибиться..
Цитата:
Сообщение от Олег
если делать правильно то и время можно сократить.
к примеру, правильно созданные теги, помогают по времени.
или если ты как надо за регестировался( во всех пунктах на поисковике)
robots.txt. - самый простой ,закинуть пустой файл без кодов.
или с таким кодом
User-agent: Yandex (или имя поисковика на твой выбор ) или без имени только с * если ко всем поисковикам.
Disallow: / разрешает индоксикацию на весь сайт.
запрет на поиск страницы.
Disallow: / # имя страницы.
Disallow: /cgi-bin # по папкам
поисковики.
Google – «googlebot»;
Яндекс – «Yandex»;
Рамблер – «StackRambler»;
Yahoo – «Yahoo! Slurp»;
MSN – «msnbot».
пример такой будет.
_________________________________
User-agent: msnbot
Disallow: /
_________________________________
|