swap

Да.

А если в памяти не хватит места скажет:
xxx:/# swapoff -a
swapoff: /dev/hda2: Cannot allocate memory

и оставит все как есть.

Как бы не так. Я в свой время такой эксперимент проводил, и мозилла у меня грохнулась (в ней было специально много вкладок открыто, плюс ещё всякой фигнёй память забил). oom-killer её убил, насколько я понимаю (в логи не смотрел, мне был интересен только результат).

В общем если не уверен, что памяти достаточно, чтобы swap освободить, - не ст\'оит swapoff гонять.