La commande, certes un peu risquée, proposées en #16 fait une désinstallation complète (purge) de tous les paquets dont le nom contient '-desktop', 'xorg' ou 'xserver'
ainsi que tous les paquets installés automatiquement en tant que dépendance des premiers (--autoremove).
En principe il ne peut s'agir que de paquets liés aux environnement de bureau et j'ai testé cette commande sur un serveur (sans interface graphique) avant de la donner.
Mais tu as entièrement raison, j'aurais du demander d'examiner attentivement la liste des paquets proposées à la désinstallation avant de valider la commande.
Effectivement c'est très curieux que cela ait entraîné la désinstallation du méta-paquet ubuntu-server.
EDIT :
J'ai oublié de donner le lien vers la doc :
https://doc.ubuntu-fr.org/apt-cli#patterns
Et une commande moins radicale, mais sans doute moins efficace, aurait été :
sudo apt purge --autoremove ~n-desktop$ ~n^xorg ~n^xserver
⇒ tout ce qui se termine par '-desktop', tout c qui commence par 'xorg' ou 'xserver'