Ubuntuサーバー(16.04)と、ubuntu desktop(16.04)を同じローカルネットに接続しています。
このローカルネットにVPN接続した際、ubuntu desktopにはsshで接続できますが、
Ubuntuサーバーはsshやpingが弾きます。

ubuntu desktopを踏み台にして、Ubuntuサーバーにssh接続するとVPN経由でもリモート接続可能ですが、
踏み台を使用して二段階のsshにするとサーバーに計算をさせる際の設定が難しい課題があります。

このため、UbuntuサーバーにVPN経由で踏み台なしでssh接続したいですが、
設定をどう変えれば良いかわかりません。セキュリティ関係の項目だと思うのですが。

可能な範囲で設定法をご教授いただければ幸いです。
よろしくお願いいたします。