Falha na connection VPN ao usair SSH

Eu quero me conectair ao meu server no meu escritório por VPN, que possui um server SSH instalado.
Mas quando me conecto à VPN e depois tentando SSH no meu server, a connection vpn foi fechada de repente.
Qual é o problema?
O operating system do server é o operating system Cent e o operating system do meu computador doméstico é o Ubuntu.
Muito obrigado.