Für eine Grafische Oberfläche (sprich Window Manager / Desktop Umgebung), sei es nun Fluxbox, Gnome, KDE oder was auch immer, muss als erstes der X-Server laufen.
Einen Login Manager brauchst du nur wenn Du dich "grafisch" einloggen willst; wie X ohne Login Manager gestartet wird steht auf der
X Wiki Seite...
(startx, ~/,xinitrc)