Как правильно скрыть файл с обратными ссылками от поисковик

Discussion in 'SЕО - тонкости, методы раскрутки' started by famicom, 14 Jun 2011.

  1. famicom

    famicom New Member

    Joined:
    17 May 2011
    Messages:
    8
    Likes Received:
    0
    Reputations:
    0
    Как правильно скрыть файл с обратными ссылками от ПС

    Извиняюсь, если не в той теме топ.

    Приветствую всех. Ситуация такая: в корне сайта находится хтмл файл с большим количеством обратных ссылок. Например links,html. Он закрыт в robots.txt командой Disallow: http://с а й т/links.html

    Однако, в панели Яндехвебмастер, на закладке "анализ robots.txt", при проверке этого самого robots.txt, выдаётся такое сообщение "4: Disallow: http://с а й т/links.html Правило начинается не с символа '/' и не с символа '*' "

    Что это за ошибка и означает ли это, что файл-таки обнаруживается поисковиками (в данном случае, яндехом)? И как правильно скрыть его?
    Знающие люди - подскажите.
     
    #1 famicom, 14 Jun 2011
    Last edited: 14 Jun 2011
  2. rudi

    rudi Active Member

    Joined:
    3 Jun 2010
    Messages:
    487
    Likes Received:
    184
    Reputations:
    5
    http://help.yandex.ru/webmaster/?id=996567
     
  3. Nenorma

    Nenorma New Member

    Joined:
    3 Mar 2009
    Messages:
    6
    Likes Received:
    0
    Reputations:
    0
    Ответ здесь

    ответ такого типа как у RUDI иногда воспринимается за посыл поэтому отвечу здесь - тем более линковать не надо )

    User-agent: * # не будет использована роботами Яндекса
    Disallow: /cgi-bin

    User-agent: Yandex # будет использована всеми роботами Ядекса
    Disallow: /*sid= # кроме основного индексирующего

    User-agent: YandexBot # будет использоваться только основным индексирующим роботом
    Disallow: /*id=
     
  4. famicom

    famicom New Member

    Joined:
    17 May 2011
    Messages:
    8
    Likes Received:
    0
    Reputations:
    0

    Спасибо, буду разбираться.
     
Loading...