Ton serveur est bien accessible et il semble que cela ne bloque que pour toi. Il faut donc vérifier les éventuels pare-feu côté client et serveur (fail2ban sur le serveur ?).
$ ping -c 3 163.172.202.66
PING 163.172.202.66 (163.172.202.66) 56(84) bytes of data.
64 bytes from 163.172.202.66: icmp_seq=1 ttl=55 time=13.2 ms
64 bytes from 163.172.202.66: icmp_seq=2 ttl=55 time=13.3 ms
64 bytes from 163.172.202.66: icmp_seq=3 ttl=55 time=13.2 ms
--- 163.172.202.66 ping statistics ---
3 packets transmitted, 3 received, 0% packet loss, time 2003ms
rtt min/avg/max/mdev = 13.219/13.276/13.350/0.143 ms
$ ssh root@163.172.202.66
root@163.172.202.66's password: