Alternativ natürlich vnc.
Das ist zwar kein X-Server, aber damit
kann man auch schön remote arbeiten.
Insbesondere gibt's vnc auch mit Sourcen und
so (hab' die URL grad nicht da, ist wohl GPL?).

Hauptnachteil gegenüber einem X-Server:
Man kann nicht einzelne Fenster, sondern
immer nur den kompletten Desktop darstellen.