Il s'agissait de piloter le bureau xfce d'une archlinux sur raspberrypi et adapté pour l'écran de ma TV. Pour ne pas sortir le clavier pour des choses simples, je le fais avec la télécommande du décodeur TV.
La solution est sur un autre sujet que je ne retrouve pas mais elle passe par l'activation d'une option d'accessibilité dans xfce et un adaptateur infrarouge usb.
Edit : c'est sur le forum de Flirc, voilà
les valeurs à paramétrer sur le récepteur pour émuler la souris.