VPN连接时首先连接到服务器，现在无法在没有VPN的情况下SSH

当我第一次SSH（RSA无密码，没有密码）到我刚刚ssh root@X.X.X.X在DigitalOcean上设置的服务器时，我忘了我的VPN已连接。如果我记得，我会把它关掉。

但是，现在当我尝试在没有连接VPN的情况下连接到服务器时，我拒绝连接：

ssh: connect to host X.X.X.X port 22: Connection refused

使用netstat -rn该行只在连接到VPN出现：

X.X.X.X      Y.Y.Y.Y      UGHS            2      409     en0

Y.Y.Y.Y本地路由器网关在哪里。

无论VPN是否连接，我都希望能够使用SSH。谁能帮我实现这个目标？

或者我会更好地在DigitalOcean上丢弃服务器并重新启动，而不连接VPN？

我正在使用OSX El Capitan。