LINUX.ORG.RU

Настройка robots.txt для гугла

 , robots.txt


0

1

в robots.txt я написал след строчку:

Disallow: *.xml

в результате в поиске гугла (site:moi.site ) ссылки на xml-ки остались с надписью: Описание веб-страницы недоступно из-за ограничений в файле robots.txt.

А можно ли вообще убрать на них ссылки из индекса ?

P.S.: yandex вообще эти xml-ки не показывает.

★★☆☆

Последнее исправление: SI (всего исправлений: 1)

Емнип, после того, как ты закрыл эти страницы в robots.txt, поисковик лишь перестал их индексировать. Из самого индекса они пропадут позже.

Тут вроде написано, что делать, если надо срочно убрать ссылки из индекса.

Apple-ch ★★
()
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.