Проблема с Htaccess

Тема в разделе "Общие вопросы", создана пользователем -, 24 авг 2007.

Наш партнер Genesis Hackspace
  1. Гость

    Нажно сделать так, чтобы боты google, yandex, rambler и yahoo не индексировали форум по адресу mysite.net. Но непросто написать что-то вроде


    Код (Text):
    RewriteCond %{HTTP_USER_AGENT} ^.*Slurp.* [NC,OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*msnbot.* [NC]
    RewriteRule ^(.*)$ - [F]
    а написать так, чтобы именно по адресу mysite.net, а по адресу mysite2.net и боты и я спокойно ползали бы.


    PS пробовал так, не вышло.
    Код (Text):
    RewriteCond %{HTTP_USER_AGENT} !^yandex.* [NC,OR]
    RewriteCond %{HTTP_USER_AGENT} !^googlebot.* [NC,OR]
    RewriteCond %{HTTP_USER_AGENT} !^.*gaisbot.* [NC,OR]
    RewriteCond %{HTTP_USER_AGENT} !^rambler.* [NC,OR]
    RewriteCond %{HTTP_USER_AGENT} !^aport.* [NC,OR]
    RewriteCond %{HTTP_USER_AGENT} !^metacrawler.* [NC,OR]
    RewriteCond %{HTTP_USER_AGENT} !^msnbot.* [NC,OR]
    RewriteCond %{HTTP_USER_AGENT} !^.*crawler.* [NC]
    RewriteCond %{HTTP_REFERER} ^.www.mysite.net$ [OR]
    RewriteCond %{HTTP_REFERER} ^.mysite.net$

    RewriteRule ^(.*)$ http://mysite.net/forum.html [R=301,L]
    Спасибо.
     
  2. GOsha

    GOsha Гость

    А вы не пробовали делать это с помощью файла robots.txt:

    СОздаете файл robots.txt:
    Код (Text):
    User-agent: *
    Disallow: /forum/
    Disallow: /files/
    Disallow: /admin/
    Там перечисляете, куда роботам не лазить. Можно даже указать куда и кому.
    А потом в корень сайта. РОботы его слушаются.

    http://z-zag.com/index.php?p=articles&artname=robofaq - тут более подробно.
     
Загрузка...
Похожие Темы - Проблема Htaccess
  1. Denybxx
    Ответов:
    18
    Просмотров:
    126
  2. bes
    Ответов:
    0
    Просмотров:
    50
  3. Denybxx
    Ответов:
    4
    Просмотров:
    131
  4. AgniXRudra

    Проблема Проблема с MITM

    AgniXRudra, 8 дек 2016, в разделе: Kali Linux
    Ответов:
    8
    Просмотров:
    143
  5. Zloikaktus
    Ответов:
    1
    Просмотров:
    105

Поделиться этой страницей