Некоторое время назад в рассылке linux-kernel были ой какие горячие споры та эту тему :) Я считаю: отключай и всё. Некоторые считают, что имеет смысл делать swap на ramdisk... Если это так, то это лишь показатель серьёзной кривизны VM в Linux.
Так что отключай. Системы РВ всегда делаются без свапа, чтобы время реакции было всегда небольшим.