Показать сообщение отдельно
Старый 28.03.2011, 19:09   #6 (permalink)
Eli
TEHNARI.RU
 
Аватар для Eli
 
Регистрация: 31.03.2008
Адрес: Израиль
Сообщений: 18,407
Записей в дневнике: 7
Сказал(а) спасибо: 10
Поблагодарили 1 раз в 1 сообщении
Репутация: 14157
По умолчанию

разве? мне известно обратное.. и запрет и разрешение .. хотя - я просто мог ошибиться..

Цитата:
Сообщение от Олег Посмотреть сообщение
если делать правильно то и время можно сократить.
к примеру, правильно созданные теги, помогают по времени.
или если ты как надо за регестировался( во всех пунктах на поисковике)

robots.txt. - самый простой ,закинуть пустой файл без кодов.

или с таким кодом

User-agent: Yandex (или имя поисковика на твой выбор ) или без имени только с * если ко всем поисковикам.

Disallow: / разрешает индоксикацию на весь сайт.

запрет на поиск страницы.
Disallow: / # имя страницы.
Disallow: /cgi-bin # по папкам

поисковики.


Google – «googlebot»;

Яндекс – «Yandex»;

Рамблер – «StackRambler»;

Yahoo – «Yahoo! Slurp»;

MSN – «msnbot».

пример такой будет.
_________________________________
User-agent: msnbot
Disallow: /
_________________________________
Eli вне форума   Ответить с цитированием
Ads

Яндекс

Member
 
Регистрация: 31.10.2006
Сообщений: 40200
Записей в дневнике: 0
Сказал(а) спасибо: 0
Поблагодарили 0 раз(а) в 0 сообщениях
Репутация: 55070