По каким признакам запроса можно определить, что стучится бот? Яндекс/Гугл/Еще кто. Может есть какие-то списки юзер-агентов? Но я где-то слышал, что яндекс-гугл умеет ходить с чужими юзер-агентами.
Ответ на:
комментарий
от tyamur
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.
Похожие темы
- Форум YandexMobileBot игнорирует robots.txt (2016)
- Форум Кто-нибудь в курсе что это за херня и как её звать? (2012)
- Форум защита от подбора имени юзера (2004)
- Форум Наркоманы everywhere (2018)
- Форум climm: как попросить показывать ники а не UIN (2009)
- Форум DNS и файл root.cache (2002)
- Форум [фичереквест]индикация присутствия юзера в онлайне через jabber агента-бота, добавляемого в ростер (2011)
- Форум ip адреса поисковых ботов (2014)
- Форум «Озон» начал блокировать линуксоидов? (2023)
- Форум Duckduckgo и выдача, которую он получает от яндекса (2018)