Наверное, да. Регулярный Ubuntu приносит Unity и множество других программ, которые продолжают выполняться в памяти, а Xubuntu использует меньше.
Если вы хотите очень быстро и мало потреблять память, вы можете попробовать загрузить сервер Ubuntu и установить только то, что вам нужно, или даже использовать OpenCD вместо Open DE, а не DE.