Почему в час пик по SSH пускает, а по SFTP нет?

Не могу никак понять в чем может быть дело. Суть вот в чем:

В час пик, когда канал сервера почти забит, у меня не получается подключиться к серверу через sftp клиенты (пробовал самые разные, на разных ОС). Но через терминал, по ssh, спокойно конектится.

CentOS х64

Причем на другом, похожем сервере, при высоких нагрузках такая пролема не наблюдается.

Сталкивался ли кто-нибудь с подобным?