Сменил провайдера, и началось, если в окно c ssh не вводить что то секунд 20-30 то все, больше в окно ничего нельзя ввести, только реконект. Пробовал разные дистры, разные клиенты и версии сервера, игрался с TCPKeepAlive.
Что за колдунство у прова, и как это забороть?