В Slackware64 13.0 при запуске иксов они всё вешали напрочь(nVidia GeForce 7600 GS).
Оказалось, проблема была в xorg-server (либо из-за того, что версия 1.6.3, либо из-за сборки).
Собственно, проблему я заметил ещё в июне, когда качал неофициальные образа. Последней работающей без проблем сборкой была от 9-го июня.
Итак, всё решилось удалением пучка пакетов xorg-server и сборкой xorg-server 1.5.1.
В обязательном порядке пришлось откатить библиотеку libXfont с версии 1.4.0 до 1.3.3.
В остальном, всё собралось нормально (собирал без glx и dri).
Дополнительно качал и собирал ещё xf86-input-keyboard-1.3.1.tar.bz2, xf86-input-mouse-1.3.0.tar.bz2 и xf86-video-nv-2.1.12.tar.bz2.
В итоге, всё работает как часы.