Исправление beastie, (текущая версия) :
Косят — не косят, а bingbot та ещё зараза. Ломится по триста раз в час с разных IP на один и тот же контент. И фетчит, фетчит, фетчит ... фетчит и фетчит.
Можешь смело добавить 157.55.39.0/24 в black-list. Хуже от этого не будет.
PS: точнее даже: 157.54.0.0/15, 157.60.0.0/16, 157.56.0.0/14
Исходная версия beastie, :
Косят — не косят, а bingbot та ещё зараза. Ломится по триста раз в час с разных IP на один и тот же контент. И фетчит, фетчит, фетчит ... фетчит и фетчит.
Можешь смело добавить 157.55.39.0/24 в black-list. Хуже от этого не будет.