А что на этот вопрос нет разрешимого ответа?
Или в XF86Config не работает опция FontPath какая разница сколько блин серверов запущено?
Если они на локальной машине ответсам найдешь, если как терминалки достаточно одного fixed и cursor для запуска.
Самый разумный ответ это гибкость управления шрифтами, что если постоянно проводишь эксперименты с шрифтами (загрузка/удаление) то нет необходимости в перезапуске XFree86, достаточно прегрузить xfs.