LINUX.ORG.RU
ФорумAdmin

mod_security


0

0

Проблема следующая.

Не могу проиндексить сайт на поисковиках.
Пишет:

Адрес www.mydomen.ru не был внесен в базу Яндекса, так как он запрещен 
к индексации в файле robots.txt, или при обращении к robots.txt сервер 
вернул ошибку 5xx.

Хотя robots.txt имеется, такое ощущение что режет mod_security.

Вопрос как mod_security указать что robots.txt не надо запрешать?
anonymous

Ответ на: Re: mod_security от Chumka

Re: mod_security

Вот полные логи:


access_log

213.180.216.253 - - [14/Nov/2005:02:13:16 +0300] "GET /robots.txt 
HTTP/1.1" 500 540


error_log

[Mon Nov 14 02:13:16 2005] [error] [client 213.180.216.253] 
mod_security: Access denied with code 500. Pattern match 
"!(mod_security|mozilla)" at HEADER. [hostname "www.vdovinko.ru"] [uri 
"/robots.txt"]



 audit_log

========================================
Request: 213.180.216.253 - - [14/Íîÿ/2005:02:13:16 +0300] "GET 
/robots.txt HTTP/1.1" 500 540
Handler: (null)
----------------------------------------
GET /robots.txt HTTP/1.1
Connection: Keep-Alive
From: webadmin@yandex.ru
Host: www.vdovinko.ru
User-Agent: Yandex/1.03.003 (compatible; Win16; D)
mod_security-message: Access denied with code 500. Pattern match 
"!(mod_security|mozilla)" at HEADER.
mod_security-action: 500

HTTP/1.1 500 Internal Server Error
Connection: close
Transfer-Encoding: chunked
Content-Type: text/html; charset=iso-8859-1

anonymous ()
Ответ на: Re: mod_security от anonymous

Re: mod_security

Не пойму чт оне так.

В логи пишет то что выше, но при запросе через инет http://www.vdovinko.ru/robots.txt

вижу содержимое:

# For all robots
User-agent: *
Disallow: /img/
Disallow: /css/
Disallow: /msg.php 




Почему тогда не индексирует и пишет:

Адрес www.vdovinko.ru не был внесен в базу Яндекса, так как он запрещен 
к индексации в файле robots.txt, или при обращении к robots.txt сервер 
вернул ошибку 5xx.

anonymous ()
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.