История изменений
Исправление shimshimshim, (текущая версия) :
сделать на сервере некий «эфир для ИИ»
Зачем это вебмастеру?
Но вообще самые злостные боты это не АИ скраперы, а фейсбук. Фейсбук сканит сайты из каждого своего датацентра одновременно, сотнями тысяч запросов в день. Помогает только бан по IP.
Исходная версия shimshimshim, :
сделать на сервере некий «эфир для ИИ»
Зачем это вебмастеру?
Но вообще самые злостные боты это не АИ скраперы, это фейсбук. Фейсбук сканит сайты из каждого своего датацентра одновременно, сотнями тысяч запросов в день. Помогает только бан по IP.